Middle Data Engineer/ Инженер-программист( Агентство сервисизации и реинжиниринга )

Описание вакансии

компания "агентство сервисизации и реинжиниринга"

ключевые задачи:
разработка и поддержка etl/elt-пайплайнов
создание и развитие потоков данных из различных источников через kafka с обработкой в spark
построение слоя трансформации и очистки сырых данных
создание и внедрение процессов data quality и data governance
работа с оркестратором airflow (настройка, мониторинг, оптимизация пайплайнов)

мы ожидаем:
уверенное владение python
практический опыт работы с kafka, spark и airflow
опыт написания и отладки сложных sql-запросов
опыт работы с greenplum и/или clickhouse (будет преимуществом)
опыт работы с mongodb
понимание контейнеризации (docker) и оркестрации (kubernetes)
знакомство с devops-практиками
высшее образование

мы предлагаем:

финансовая мотивация и гарантии:
конкурентная заработная плата
официальное трудоустройство (тк рб), полный соцпакет
28 дней отпуска + матпомощь на оздоровление
медицинская страховка

профессиональное развитие:
оплата курсов, конференций и семинаров

Метки