Инженер сопровождения ETL процессов (middle) #офис #удаленка #гибкийграфик Локация: Москва Компания: United Credit Bureau
Требования: - знание Python, Bash; - опыт составления SQL запросов и их оптимизация; - опыт работы с Linux; - опыт работы с Apache NiFi; - работа с СУБД: PostgreSQL, Oracle или др.; - умение разбираться в чужом коде.
Будет плюсом: - Kafka; - Ansible; - Kubernetes; - Airflow; - Ceph или другое S3 хранилище.
Задачи: - проектирование, разработка и поддержка ETL-процессов на Apache Nifi; - загрузка данных из различных источников (потоковая и пакетная); - сопровождение и администрирование систем ETL-окружения (Nifi и система для обмена файлами с клиентами).