СБЕР·Москва·17 авг.
Senior ML Engineer (GenAI Data Governanace)
🏢 ОфисMiddleПолная занятость
Вилки нет, про деньги придётся договариваться с нуля.
Наша компания
Наша NLP команда занимается задачами, связанными с извлечением информации из документов, диалогов, текстов различной природы. Главной задачей для нас является создание готовых продуктов с LLM под капотом, а также создание self-service для бизнеса, где каждый может создать нужный ему сценарий (скилл) в режиме No-code.
Чем предстоит заниматься
Проектировать и калибровать judge-пайплайны: рубрики, эталонная разметка, согласованность с людьми, борьба с позиционным bias и bias по длине
Строить RAG-поиск для дублей и противоречий: чанкинг, гибридный поиск, реранкинг, проверка противоречий на уровне утверждений
Делать регресс-тесты знаний: golden set, пороги, прогон на каждое изменение промпта или модели
Ловить галлюцинации: извлечение утверждений, привязка к источнику, верификация
Дообучать и дистиллировать judge-модели, чтобы снизить цену и задержку без потери качества
Собирать мультиагентные пайплайны с guardrails и контролем стоимости прогона
Наши требования
Высшее образование: математика, физика, информатика или профильный data science
5+ лет в ML, из них не меньше полутора лет с LLM в проде
RAG в продакшене, а не демо: с метриками качества, нагрузкой и историей улучшений
Fine-tuning: SFT, LoRA/QLoRA, желательно DPO
Опыт построения и калибровки LLM-as-judge
Guardrails и детекция галлюцинаций
Мультиагентные пайплайны: оркестрация, обработка отказов, ограничение стоимости
Python: пишете код, который уходит в прод
Английский для чтения статей и документации
Опыт python-бэкендера: FastAPI, асинхронность, очереди, PostgreSQL, векторные хранилища
Графы знаний и онтологии
NLI, извлечение фактов, работа с разметчиками
Публикации, доклады, open source
Мы предлагаем
Гибридный формат работы
Годовая премия
Корпоративный спортзал и зоны отдыха
Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
Регулярные митапы и развитое DS-community
Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
Подписка Прайм с возможностью совместного использования на трёх близких
Вознаграждение за рекомендацию друзей в команду Сбер
Технологии и навыки
СБЕР
Москва
ГрейдMiddle
ЗанятостьПолная занятость
РегионРоссия
ФорматОфис
ИсточникСкрыто
Опубликовано17 авг.
Мы против мошенников на площадке: если тебя просят заплатить, продиктовать код или установить непонятное приложение, прекращай общение и сразу пиши нам (чат с основателем или форма обратной связи).