РоссияЛоция
Стажер-инженер данных BI (Data Engineer)
1 нед. назад
РоссияTraineeRemote
sqldbtdagsterpostgresclickhousepythonapache supersetetl
Стажер-инженер данных BI в ИТ-компании Лоция с возможностью удалённой работы, занимающийся построением ETL-процессов, трансформацией данных, оркестрацией рабочих процессов и визуализацией BI-отчетов.
Обязанности
- построением ETL-процессов: разработка и настройка конвейеров по сбору и трансформации данных из различных источников
- работой с современным стеком трансформации: освоение и применение DBT для превращения «сырых» данных в чистые аналитические витрины
- оркестрацией данных: настройка и поддержка рабочих процессов (pipelines) в Dagster, чтобы данные в отчетах обновлялись вовремя и без сбоев
- управлением хранилищами: работа с Postgres и высокопроизводительной колончатой базой данных Clickhouse для обеспечения скорости работы отчетов
- визуализацией смыслов: разработка интерактивных BI-отчетов в Apache Superset, которые помогут бизнесу принимать решения на основе данных
- оптимизацией выборок: анализ и ускорение тяжелых запросов для повышения производительности всей системы отчетности
Требования
- SQL: уверенное владение языком (сложные выборки, агрегатные функции, понимание принципов оптимизации запросов)
- базы данных: понимание устройства реляционных БД (в частности, PostgreSQL) и общих принципов построения аналитических хранилищ
- Python: базовые знания языка, умение писать скрипты для обработки данных и автоматизации простых задач
- аналитический склад ума: способность работать с большими массивами данных, выявлять закономерности и структурировать информацию
Будет плюсом
- BI-инструменты: опыт создания дашбордов в Apache Superset, Tableau, Power BI или аналогичных системах
- ETL/ELT: понимание концепций извлечения, трансформации и загрузки данных
- архитектура данных: понимание разницы между OLTP и OLAP системами (например, почему для аналитики используется Clickhouse)
- современный стек: интерес к инструментам DBT (Data Build Tool) или оркестраторам данных (Airflow, Dagster)
Условия
- Формат работы: можно удалённо