СБЕР·Москва·7 авг.
Аналитик данных (СберБизнес)
🏢 ОфисMiddleПолная занятость
Вилки нет, про деньги придётся договариваться с нуля.
Наша компания
Ищем аналитика данных в команду разработки AI Бизнес-помощника внутри интернет-банка для предпринимателей (СберБизнес). Цель нашего Помощника - взять на себя рутинные банковские операции, помочь подобрать сервисы, подходящие конкретному пользователю, подсказать возможные векторы развития его бизнеса на основе предыдущих результатов работы.
О роли
Взаимодействие пользователя с Помощником происходит через чат, под капотом которого - LLM, RAG, MCP и, конечно, классические прикладные сервисы. Система семантически различает сотни смежных бизнес-сценариев, извлекает критическую информацию и подключает профильные GenAI-инструменты для выполнения операций.
Чем предстоит заниматься
Разрабатывать и внедрять кастомные метрики оценки ответов агентов: точность, полнота, непротиворечивость (включая LLM-as-a-judge)
Проводить структурный анализ ошибок (error analysis): выявлять паттерны галлюцинаций, сбоев логики, деградации качества
Планировать и проводить A/B-эксперименты: сравнивать версии промптов, архитектур агентов и модели; интерпретировать результаты
Генерировать синтетические датасеты (диалоги, запросы, эталонные ответы) для тестирования и улучшения агентов
Искать слабые места в работе агентов, вырабатывать и обосновывать решения по их устранению
Формализовывать требования к качеству и передавать метрики в команду глобального мониторинга платформы
Готовить аналитические отчёты и презентовать команде выводы: не просто цифры, а конкретные рекомендации
Работать с ad-hoc запросами: оперативно доставать данные, проверять гипотезы, разбирать инциденты
Научить систему лучше запоминать и использовать факты о пользователе, чтобы подстраиваться под его особенности и контекст
Развивать платформу для агентов, которые действуют на опережение — сами инициируют полезные операции или предупреждают о важных событиях без явного запроса
Усиливать безопасность и отказоустойчивость системы
Совершенствовать архитектуру, чтобы компоненты и процессы координировались быстрее и точнее
Наши требования
Знание математической статистики, теории вероятностей и дизайна экспериментов (A/B-тесты, статзначимость)
Опыт работы аналитиком данных - от 3 лет
Умение писать сложные SQL запросы
Работа на Python для анализа и визуализации данных (pandas, numpy, scipy, matplotlib)
Опыт проведения исследований: проверка гипотез, оценка результатов, формулировка actionable-выводов
Понимание устройства мультиагентных систем или сложных LLM-пайплайнов (оркестрация, цепочки вызовов, RAG)
Мы предлагаем
Комфортный современный офис рядом с м. Кутузовская
Гибридный формат работы (2 дня в неделю - работаем из дома)
Ежегодный пересмотр зарплаты, годовая премия
Корпоративный спортзал и зоны отдыха
Система обучения для профессионального и карьерного развития
Расширенный полис ДМС с первого дня работы и страхование для семьи
Программа ипотеки для сотрудников
Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
Вознаграждение за рекомендацию друзей в команду Сбера
СБЕР
Москва
ГрейдMiddle
ЗанятостьПолная занятость
РегионРоссия
ФорматОфис
ИсточникСкрыто
Опубликовано7 авг.
Мы против мошенников на площадке: если тебя просят заплатить, продиктовать код или установить непонятное приложение, прекращай общение и сразу пиши нам (чат с основателем или форма обратной связи).