Россия
АвитоТимлид разработки в команду DWH
1 мес. назад
от 500k RUBРоссияLeadRemote
javaapache flinkapache kafkadwhpythonkubernetes
Компания «Авито» ищет тимлида разработки в команду DWH для работы над платформой потоковой обработки данных, обеспечивающей real-time-системы. Работа предполагает техническое лидерство, развитие потоковой аналитики и управление платформенной инфраструктурой.
О компании
- Компания «Авито»
О продукте
- Платформа потоковой обработки данных, на которой работают критичные real-time-системы Авито: антибот, антифрод, рекламная аналитика, маркетинговые триггеры и CDC-пайплайны.
- Работа в двух направлениях: продуктовые задачи (новые алгоритмы детекции, обогащение событий) и платформа (оператор Flink на Kubernetes, инфраструктура деплоя, миграции).
- Серверная инфраструктура, поддержка железа и обновление ОС — зона ответственности отдельной команды инфраструктуры, с которой тесно взаимодействуют.
Обязанности
- Развивать real-time антибот и антифрод: детектировать ботов и фрод с помощью потоковых эвристик, разрабатывать новые сигналы.
- Развивать обогащение событий: строить операторы обогащения кликстрим-событий (геолокация, категории, атрибуты пользователя, рекламные метрики).
- Развивать CDC и data ingestion: разрабатывать пайплайны захвата изменений из БД и доставки данных в DWH в формате Apache Paimon.
- Развивать рекламную аналитику: считать CTR impressions, auction withdrawals и маркетинговые конверсии в реальном времени.
- Развивать Flink Platform: управлять Flink Kubernetes Operator, Helm-чартами, деплоями в нескольких дата-центрах и регионах.
- Обеспечивать техническое лидерство команды: задавать архитектурные стандарты и помогать команде расти.
Требования
- Глубокая экспертиза в Apache Flink или другом фреймворке потоковой обработки данных (Spark Streaming, Kafka Streams).
- Опыт руководства командой разработки от 4-х лет.
- Использование системного подхода к работе с людьми (мотивация, развитие, адаптация).
- Опыт работы с высоконагруженными продакшен-системами.
- Умение декомпозировать задачи и выстраивать технический роадмап.
- Понимание принципов работы Apache Kafka и распределённых систем.
Будет плюсом
- Опыт руководства платформенной командой без продакт-менеджера и системного аналитика.
Условия
- Возможность реализовать свои идеи в проекте с многомиллионной аудиторией.
- Талантливая команда, готовая поддержать инициативы.
- Мощное железо, дополнительные мониторы и всё необходимое для продуктивной работы.
- Прозрачная система премий, достойная зарплата — размер обсуждается на собеседовании.
- Личный бюджет на обучение: книги, курсы, конференции.
- Забота о здоровье: ДМС со стоматологией с первого дня, в офисе терапевт и массажист.
- Удалёнка и офисы в разных городах.