Россия
2ГИСDataOps engineer
5 дн. назад
РоссияMiddleHybrid
cephkuberneteslinuxkafkasparkclickhouseairflowprometheus
DataOps engineer in Holocron team to develop data infrastructure of 2ГИС with remote or hybrid work options.
О компании
- Holocron развивает инфраструктуру данных 2ГИС.
О продукте
- Предстоит запускать Ceph-кластер и участвовать в переходе на Lakehouse: S3/Ceph, Iceberg, Trino/StarRocks и Alluxio.
Обязанности
- Поддерживать HDFS, Spark, ClickHouse и Airflow, сопровождать Kubernetes в нетривиальных случаях.
- Развивать мониторинг и алертинг, разбирать инциденты, работать с NOC по сетевым вопросам.
- Базовые Helm-чарты, деплой и мониторинг разработчики делают сами.
Требования
- От 2 лет эксплуатации Ceph в production.
- Kubernetes в production с пониманием сетей, storage и операторов, уверенный Linux.
- Опыт хотя бы с частью Kafka/Spark/ClickHouse/Airflow, Prometheus и Grafana, базовое понимание сетей.
- Flink и опыт работы в командах дата-платформы будут плюсом.