РоссияТехнократия
Data Engineer
4 дн. назад
РоссияMiddleOnsite
sqlpostgresqlclickhousepythonairflowdata lakedwhpowerbi
Технократия создаёт финтех-продукты для международных рынков, сочетая скорость стартапов с надежностью enterprise-разработки.
О компании
- Мы создаём финтех-продукты для рынков, где формируется будущее финансовых технологий.
- Работаем на международных проектах, совмещая скорость стартапов с надёжностью enterprise-разработки.
Обязанности
- Проектировать и поддерживать интеграцию источников данных (взаимодействие с процессинговыми системами и Автоматизированной Банковской Системой / АБС)
- Организовывать мониторинг актуальности входящих данных и оперативно реагировать на инциденты
- Готовить данные для загрузки в оговоренные форматы хранения (Data Lake / DWH) для последующего потребления смежными командами
- Разрабатывать и оптимизировать витрины данных для BI-отчетности в Superset и PowerBI
- Проводить глубокую проверку качества данных (Data Quality), выявлять аномалии и устранять корневые причины ошибок
- Обеспечивать бесперебойную актуальность данных, нести ответственность за соблюдение SLA и быстрое восстановление при авариях
Требования
- Отличное знание SQL (DDL/DML) в PostgreSQL
- Хорошее знание SQL (DDL/DML) в ClickHouse
- Отличные навыки оптимизации SQL-запросов в PostgreSQL
- Отличные навыки работы с Python: написание и поддержка DAG-ов в Airflow, опыт работы с асинхронными сервисами
- Хорошие навыки конфигурирования PostgreSQL