VKMiddle/Senior/Lead Data Engineer в VK Видео и VK Музыку
4 нед. назад
Страна неизвестнаMiddle
pythonsqlhadoopairflowclickhouseetldwh
Middle/Senior/Lead Data Engineer role focused on building services and tools for analytics at VK Video and VK Music, working with data platform architecture and data quality.
Обязанности
- Создавать сервисы и инструменты для аналитиков.
- Проектировать миграции, интеграции и новые компоненты платформы.
- Общаться с аналитиками и заказчиками, находить их боли и превращать их в системные решения.
- Строить и развивать ETL и архитектуру DWH.
- Отвечать за качество данных от клиента до витрины.
- Например, мы сами построили Data Catalog с зависимостями, SLA, метаданными и описанием всего хранилища.
Требования
- Релевантный стек: Python, SQL, Hadoop, Airflow, ClickHouse.
- YTsaurus-большой плюс.