ЭР-Телеком Холдинг
Дата-инженер (Платформа анализа данных)
3 нед. назад
195.4k RUB / monthRussiaMiddleRemote
pythonsqlclickhousehivehadoopsparkkafkaairflow
АО «ЭР-Телеком Холдинг» запускает новый проект — «Платформа анализа данных», высокопроизводительный конвейер обработки больших объёмов данных. Ищут дата-инженера с экспертизой в backend-разработке для работы с высокими нагрузками.
О компании
- АО «ЭР-Телеком Холдинг» — российская телекоммуникационная и цифровая инфраструктурная компания.
- Известны под брендами: ДОМ.РУ, ДОМ.РУ Бизнес, Movix и др.
- Миссия — развивать цифровую инфраструктуру для жизни, бизнеса и государства.
О продукте
- Новый проект — «Платформа анализа данных», не классическое хранилище, а высокопроизводительный конвейер для обработки огромных объёмов данных.
Обязанности
- Разработка и сопровождение высоконагруженного конвейера обработки данных на отдельном контуре.
- Реализация API для взаимодействия между компонентами системы.
- Сбор информации через коллекторы (syslog, UDP и другие протоколы).
- Построение ETL/ELT-пайплайнов с использованием Airflow, Spark, Kafka.
- Оптимизация производительности: профилирование, работа с многопоточностью, диагностика и устранение узких мест.
- Интеграция внешних источников данных в связке с аналитиком.
Требования
- Опыт от 2 лет в дата-инженерии или разработке высоконагруженных систем.
- Высшее образование.
- Python — основной язык для разработки пайплайнов и автоматизации.
- SQL — уверенное владение, оптимизация сложных запросов.
- ClickHouse, Hive и другие СУБД.
- Опыт работы с Big Data: Hadoop, Spark, Kafka.
- Оркестрация: Airflow, Jenkins или аналоги.
- Опыт разработки API высокой нагрузки (понимание многопоточности, работа с сетевыми протоколами).
- Опыт работы с коллекторами сбора информации (syslog, UDP и другие).
Будет плюсом
- Системное мышление.
- Понимание производительности и архитектуры.
- Умение работать с большими объёмами данных.
- Коммуникация с аналитиками и смежными командами.
Условия
- Официальное трудоустройство в штат дочерней аккредитованной IT-компании ООО «НАПА ЛАБС»; полный соцпакет: оплачиваемые отпуска, больничные (100% компенсация), командировки.
- Профессиональный рост: участие в профильных конференциях, доступ к корпоративной библиотеке и курсам.
- ДМС со стоматологией после прохождения испытательного срока.
- Корпоративные привилегии: бонусные тарифы на телеком-услуги Дом.ру, программы лояльности, скидки в фитнес-клубы и многое другое от партнеров.
- Дружелюбная атмосфера в команде профессионалов, прозрачные процессы.
- Яркая корпоративная жизнь: внутренние хакатоны, митапы, совместные выезды и спортивные мероприятия.
Как откликнуться
- Будем ждать резюме в телеграм/на почту с указанием, на какую вакансию отклик.