Яндекс·21 авг.
Аналитик-разработчик в команду ML-аналитики Алисы
Ориентир по рынку≈ 198 000 – 263 000 ₽наша приблизительная оценка по 24 вакансиям этой роли и грейда, у работодателя вилка не указана
≈ 2,4 тыс.–3,2 тыс. $
🌍 УдалённоMiddleПолная занятостьКорпорация
Стоит ли откликаться
Стоит откликнуться, но спросите про деньги
Вилку работодатель не назвал, но ориентир по рынку есть: он в строке «Деньги». Смущает только, что вакансия висит давно.
2 из 4 в норме
Висит давно: что спросить, чтобы не откликаться в пустоту
Деньги
Вилку работодатель не назвал. Ориентир на созвон: столько платят в 24 похожих вакансиях Аналитик уровня Middle.
Живость
Открыта уже 61 день. Источник её держит, но за таким сроком часто стоит трудный найм или набор в резерв.
- Зарплата не указана
Описание
Обязанности: 9, требования: 6. Понятно, что за работа, ещё до отклика.
- Не сказано
- как оформят, из каких стран можно работать и часовой пояс команды
Что требуют
ОбязательноMLSQLPythonPandasLLM
ПлюсомNLP
Надбавка к зарплате на этом уровне: Python +43%, SQL +22%.
Полный разбор в Pro
Это короткий разбор. В Pro полный: под эту вакансию и ваше резюме
Сколько просить
Не продешевите: сумма под ваше резюме, нижняя граница и готовые фразы для торга
Ваше резюме против требований
Пройдёт ли ваше резюме фильтр: что совпало с требованиями и что дописать до отклика
Спросить у работодателя
10 вопросов именно к этой вакансии: что спросить на первом созвоне
Когда откликаться
Стоит ли спешить: за сколько дней Яндекс обычно закрывает вакансии
30 дней Pro: полный разбор каждой вакансииЧто ещё входит в Pro
Наша компания
Алиса — один из самых популярных эмпатичных ассистентов в России, которым ежедневно пользуются миллионы людей. Наша команда создаёт ассистента, который решает задачу пользователя: от «нужно» до «готово». Мы ищем аналитика-разработчика в команду ML-аналитики, чтобы вместе строить системы оценки качества для передовых LLM и агентских моделей. Ваша работа будет фундаментом, на котором мы создаём умного и полезного помощника, способного решать сложные задачи в реальном мире.
Чем предстоит заниматься
Построение системы оценки качества ответов моделей
Вам предстоит разработать и внедрить систему LLM-as-a-judge для автоматической оценки ответов наших моделей. Это ключевой шаг в переходе от устаревших подходов к современным методам контроля качества, который напрямую повлияет на развитие продукта
Создание пайплайнов обработки данных
Вы будете работать с текстовыми и мультимодальными данными, создавая надёжные и эффективные пайплайны для сбора данных обучения и оценки. Ваша задача — автоматизировать процессы, чтобы данные были всегда актуальными и качественными
Разработка end-to-end-метрик для Алисы
В рамках большой перестройки подходов к аналитике вы поможете разработать общую систему офлайн-метрик. Это включает в себя определение критериев качества, создание пайплайнов оценки и поиск данных, которые помогут нам создавать по-настоящему «вау-продукт»
Встраивание решений в продакшен
Созданные вами инструменты и метрики не должны оставаться в виде прототипов. Важной частью работы будет интеграция ваших решений в продовые процессы команды ML-разработчиков и аналитиков
Больше об аналитике в Яндексе — в канале Yandex for Analytics
Наши требования
Владеете SQL и Python, используете Pandas
Знаете теорию вероятностей и математическую статистику
Умеете писать аналитический продакшен-код и создавать инструкции, способны видеть продукт или проект в целом
Обладаете навыками анализа и построения эффективных процессов обработки данных
Инициативны и готовы к самостоятельному поиску решений
Работали с NLP, краудсорсинговыми разметками и ML
