РоссияКодекс-ИТ
Data Engineer (Middle)
1 мес. назад
150k–170k RUBРоссияMiddleRemote
pythonapache airflowetldwhgraphqlrestfulapache icebergprometheus
Разработка единой системы оценки эффективности с использованием технологий DWH, ETL, Python и Apache Airflow в удаленном формате.
О продукте
- Разработка единой системы оценки эффективности.
Обязанности
- Разработка решений вокруг DWH
- Создание ETL / настройка сбора данных, BI-аналитика
- Проработка архитектуры данных и системы для их сбора
- Внедрение нового функционала, сокращение техдолга
Требования
- Опыт проектирования и построения пайплайнов: Python / Apache Airflow
- Интеграция источников с GraphQL, RESTful
- Хранение данных в Apache Iceberg / проектирование архитектуры хранения данных
- Проектирование архитектуры сбора данных и витрин
- Тестирование данных на всех уровнях требований к качеству данных
- Настройка метрик и алертов Prometheus / интеграция с внутренними системами оповещений
- Знание предметной области
Условия
- Удаленный формат работы
- Интересный проект с архитектурными задачами
- Профессиональный рост