Как формировались задачи и коммуникация с бизнесом
Что проверяют
Умеете ли вы превращать просьбу бизнеса в задачу, которую можно решить и измерить, и не делаете ли модели ради моделей. Следом часто спрашивают про случай, когда вы отговорили бизнес от ML или результат не оправдал ожиданий.
Как отвечать
Опирайтесь на свой реальный проект и свои цифры; каркас такой:
- откуда приходили задачи: запросы продуктовой команды, бэклог отдела данных, собственная инициатива после анализа. Кто расставлял приоритеты;
- постановка: какое решение изменится после модели, какую бизнес-метрику это двигает (выручка, отток, ручной труд) и какая ML-метрика её заменяет офлайн. Какой был бейзлайн: правило, эвристика, текущий ручной процесс;
- проверка реализуемости: есть ли данные нужной глубины, как размечен таргет, сколько стоят ложные срабатывания и пропуски. Иногда на этом шаге выясняется, что хватит SQL-запроса и дашборда;
- процесс: задачи в трекере, спринты, для исследовательской части ограничение по времени, например две недели на прототип и решение «продолжаем или нет»;
- коммуникация: демо промежуточных результатов, отчёт в терминах бизнеса («модель находит 60% уходящих клиентов, если обзванивать 10% базы»), а не ROC AUC; честные сроки и неопределённость;
- итог: как измеряли эффект, был ли пилот или A/B-тест, что стало с моделью через полгода.
Если с бизнесом напрямую вы не общались, скажите об этом прямо: задачи приходили через тимлида. Тогда расскажите, как вы уточняли требования, какие вопросы задавали и что сделали бы иначе, получив прямой контакт.
Где спотыкаются
Называют эффект вроде «отток снизился на 15%» и не могут объяснить, как его посчитали и была ли контрольная группа. Цифра без методики вызывает больше вопросов, чем её отсутствие.
Описывают себя как исполнителя: «бизнес ставил задачу, мы делали». Интервьюер ищет человека, который задаёт вопросы до начала работы и может сказать, что модель тут не нужна.
Жалуются, что бизнес «не понимает ML». Переводить модель на язык денег и рисков это как раз ваша работа, и такая жалоба выдаёт, что вы с ней не справлялись.