KazakhstanРЦЭЗ
Data Engineer (Middle)
1 нед. назад
700k–1000k USDTKazakhstanCISMiddleOnsite
sqlpythonairflows3apache icebergtrinoclickhousespark
Роль Data Engineer (Middle) в компании РЦЭЗ с работой над национальным проектом в здравоохранении, использованием современного стека для обработки больших объёмов данных.
Обязанности
- разработка и сопровождение ETL/ELT-конвейеров загрузки данных
- развитие слоёв Lakehouse: Bronze / Silver / Gold
- моделирование данных, сборка витрин под потребителей
- контроль качества и мониторинг загрузок
Требования
- от 2 лет в Data Engineering
- уверенный SQL и Python
- опыт с Airflow, объектным хранилищем (S3), Apache Iceberg
- опыт с Trino / ClickHouse / Spark — плюс
- понимание принципов моделирования DWH (Data Vault, медальонная архитектура) — плюс
- Docker, Git, базовое понимание Kubernetes
Условия
- работа над национальным проектом отрасли здравоохранения
- современный стек: Iceberg, Trino, Airflow, dbt, Spark, ClickHouse, Kubernetes
- реальные объёмы данных (десятки ТБ)
- официальное трудоустройство