Python Developer

Описание вакансии

Мы ищем Python Developer в нашу команду, которая развивает платформу для аналитики данных.

Платформа помогает нашим клиентам собирать и анализировать данные из разных рекламных систем - Google Ads, Meta, Microsoft/Bing Ads, TikTok и других источников.

В этой роли вы будете работать с Python, ETL-пайплайнами, API и облачными технологиями. Основная задача - помогать данным пройти весь путь: получить их из внешнего источника обработать проверить загрузить в BigQuery.
Это хорошая возможность для разработчика, который хочет развиваться именно в направлении Data Engineering и работать с реальными данными и интеграциями.

Наш стек: Python 3.12, Pandas, GCP (BigQuery, Managed Airflow, GKE, Cloud Run), Airflow, Docker, FastAPI, GitHub + GitHub Actions, Jira, Confluence.

Чем предстоит заниматься:

• Подключать новых клиентов к уже существующим ETL-пайплайнам и настраивать их под конкретные задачи
• Разрабатывать новые интеграции с внешними API и источниками данных
• Работать с авторизацией, получать данные из API, учитывать ограничения по количеству запросов и приводить данные к нужному формату
• Создавать и поддерживать Airflow DAGs - настраивать расписание, retries, backfills и следить за успешностью запусков
• Проверять качество данных и находить возможные ошибки или аномалии
• Работать с BigQuery и SQL
• Разрабатывать небольшие сервисы на FastAPI, которые используются для клиентских dashboard
• Следить за работой пайплайнов, разбираться с ошибками и настраивать уведомления о сбоях
• Работать с Docker и CI/CD через GitHub Actions
• Поддерживать техническую документацию в Confluence

Что нам важно:

• От 1 года коммерческого опыта с Python
• Умение писать понятный, структурированный и тестируемый код
• Понимание того, как работают ETL-процессы и data pipelines
• Хорошие знания SQL и опыт работы с BigQuery или похожими системами
• Практический опыт с Airflow - создание DAGs, retries, backfills, мониторинг и поиск ошибок
• Опыт работы с Docker
• Понимание основ качества данных: проверки, валидация, поиск аномалий
• Опыт работы с API будет плюсом
• Английский - от B1

Будет большим плюсом:

• Опыт работы с рекламными API: Google Ads API, Meta Marketing API и другими
• Опыт работы с Cloud Run
• Знакомство с GKE / Kubernetes
• Опыт с FastAPI или Flask
• Знание других сервисов GCP: GCS, Secret Manager, IAM
• Опыт работы с GitHub Actions

Что мы предлагаем:

• Гибридный формат работы
• Гибкий график
• Официальное трудоустройство
• Оплату профессиональных курсов и обучения
• Английский язык с нашим преподавателем
• Возможность предлагать свои идеи и самостоятельно влиять на развитие продукта
  
  https://gsz.gov.by/registration/employer/vacancy/1941217/detail-public/

Метки