СберСпасибо·Москва·12 окт.
AI/ML Engineer
Ориентир по рынку≈ 375 000 – 475 000 ₽наша приблизительная оценка по 18 вакансиям этой роли и грейда, у работодателя вилка не указана
🏢 ОфисSeniorПолная занятость
Стоит ли откликаться
Стоит откликнуться, но спросите про деньги
Сумму в объявлении не указали. Сколько платят за похожую работу, видно в разборе. Вакансия свежая: первые отклики читают внимательнее.
3 из 4 в норме
Зарплата не указана: ваша цель, нижняя граница и фраза для первого созвона
Деньги
Сумму в объявлении не указали. Ориентир на созвон: столько платят в 18 похожих вакансиях Data Scientist уровня Senior.
Живость
Появилась 7 дней назад. По свежим вакансиям почти всегда действительно нанимают.
Описание
Расписано подробно: обязанностей 6, требований 22. Картина ясна до первого созвона.
Что требуют
ОбязательноAIMLRAGLLMA/B TestingPythonLangChainSQL
Надбавка к зарплате на этом уровне: ML +43%, LLM +43%, AI +23%.
Полный разбор в Pro
Это короткий разбор. В Pro полный: под эту вакансию и ваше резюме
Сколько просить
Не продешевите: сумма под ваше резюме, нижняя граница и готовые фразы для торга
Ваше резюме против требований
Пройдёт ли ваше резюме фильтр: что совпало с требованиями и что дописать до отклика
Спросить у работодателя
Что стоит спросить: вопросы именно к этой вакансии для первого созвона
Когда откликаться
Стоит ли спешить: за сколько дней эта компания обычно закрывает вакансии
30 дней Pro: полный разбор каждой вакансииЧто ещё входит в Pro
Наша компания
Привет! 👋 Мы — команда, которая разрабатывает корпоративных AI-агентов и RAG-системы для умного поиска по внутренней документации. Часть наших решений уже в эксплуатации, часть — в активной разработке.
О роли
Сейчас мы ищем специалиста, который займётся качественной составляющей наших систем. Твоя задача — повышать качество RAG, выстраивать методологию оценки, тестирования, защиты, а также заниматься промпт-инжинирингом.
Чем предстоит заниматься
Повышение качества RAG-агентов на трёх направлениях: поиск по
Технической документации, по нормативной базе, по бухгалтерской
Документации
Промпт-инжиниринг и контекст-инжиниринг для всех агентов команды
Подготовка эталонных наборов оценки качества
Реализация LLM-as-a-judge как методологии автоматических
Наши требования
Это прикладная позиция — мы не обучаем модели, а используем готовые через корпоративный шлюз. Так что весь фокус на инжиниринг, оценку и тонкую настройку поведения агентов
Если тебя драйвит делать AI-решения надёжными, измеримыми и полезными — добро пожаловать в команду!
Python от 2 лет коммерческой разработки
Практический опыт RAG-систем в продакшене: эмбеддинги, векторные
Базы (Qdrant, FAISS или pgvector), переранжирование, чанкинг
Опыт построения и поддержки как минимум одного RAG-решения от
Начала до конца, не прототип
Практический опыт оценки качества LLM-систем: подготовка эталонных
Наборов, offline-метрики, LLM-as-judge, регрессионные проверки
Опыт работы с фреймворками оценки (Ragas, DeepEval или аналоги)
Практический опыт настройки защит для LLM-приложений: защита от
Инъекций в промпт, валидация структуры и контента выходов
Защита от утечек персональных данных
Опыт промпт-инжиниринга и контекст-инжиниринга в реальных
Проектах: итеративная настройка промптов, structured output
Function calling
Понимание архитектуры RAG: стратегии нарезки документов, метаданные
Выбор моделей эмбеддингов, переранжирование, точность ссылок на
Источник
Практический опыт работы хотя бы с одним LLM-фреймворком
Практический опыт A/B-тестирования промптов и моделей в продакшене
Опыт работы с агентскими протоколами (MCP) или собственным
Дополнительно
Настройка защит (guards) для production-агентов: фильтры от
Инъекций в промпт, валидация структуры и контента выходов
Защита от утечек ПДн, anti-hallucination механизмы
A/B-тестирование промптов и моделей для подбора лучших конфигураций
Тюнинг качества по сигналам обратной связи пользователей и
Трассировкам из Langfuse
SQL и работа с реляционными базами на базовом уровне
