Ozon·Москва·20 ч назад
Middle Data Engineer, ML, Ozon Банк
🏢 ОфисJuniorПолная занятость
Наша компания
Ozon Банк — это современные финансовые технологии для людей и бизнеса. Мы сами реализуем ключевые системы: процессинг, учётное ядро, переводы. Даём возможность влиять на результат, ценим открытость и поддерживаем коллег. Ищем дата-инженера в команду машинного обучения. Вам предстоит строить и поддерживать пайплайны больших данных для скоринга, антифрода и других ML-продуктов: от загрузки и обработки данных до доставки фичей и результатов моделей в продакшн.
О роли
Вас ждут задачи с большими объёмами данных, прямое влияние на запуск ML-продуктов и работа вместе с дата-сайентистами, MLOps-инженерами и аналитиками.
Чем предстоит заниматься
Разрабатывать batch-пайплайны на Spark/PySpark под управлением Airflow
Готовить витрины и датасеты для обучения, скоринга и мониторинга моделей
Работать с HDFS: организовывать слои и партиционирование данных, контролировать хранение и квоты
Оптимизировать производительность и ресурсоёмкость Spark-задач
Проектировать загрузку и хранение данных в ClickHouse, оптимизировать запросы и структуру таблиц
Обеспечивать надёжность пайплайнов: DQ-проверки, мониторинг, алерты и разбор инцидентов
Наши требования
Опыт работы с Kafka, Feature Store и данными для ML, скоринга или антифрода
Опыт разработки промышленных пайплайнов данных
Уверенное знание Spark/PySpark, HDFS, Python и SQL
Опыт работы с Airflow и ClickHouse
Понимание распределённых вычислений, партиционирования и оптимизации ETL-процессов
Ozon
Москва
ГрейдJunior
ЗанятостьПолная занятость
РегионРоссия
ФорматОфис
ИсточникСкрыто
Опубликовано20 ч назад
Мы против мошенников на площадке: если тебя просят заплатить, продиктовать код или установить непонятное приложение, прекращай общение и сразу пиши нам (чат с основателем или форма обратной связи).