Чем предстоит заниматься
Пределять архитектуру батч-пайплайнов на Spark/PySpark, HDFS, Airflow и ClickHouse
Оставаться hands-on руководителем: проектировать решения, писать код и проводить код-ревью
Формировать стандарты разработки: тестирование, DQ, мониторинг, алерты, SLA, документация и ранбуки
Повышать производительность и надёжность Spark-задач, оптимизировать хранение в HDFS и ClickHouse
Управлять техническим бэклогом, распределять задачи и развивать инженеров команды
Выстраивать взаимодействие с дата-сайентистами, MLOps, аналитиками и платформенными командами
Отвечать за production-ready качество пайплайнов и разбор критичных инцидентов