Назад к тренажеру

Банк вопросов из реальных собеседований

Направления, темы и вопросы из записей интервью. Фильтры ниже сохраняются в ссылке.

Проектирование ML-систем

258 вопросов из реальных интервью

Открыть в общем банке
Темы
Сложность
Компания
Язык
Проектирование ML-системСредняя
Как выкатывать новые признаки и модели в сервис ранжирования

Команда хочет добавить новые признаки или модель в ранжирующий сервис. Как сделать это безопасно?

Данные и признакиМониторинг и надёжность
Uzum
Проектирование ML-системСредняя
Как генерировать suggest-вопросы из статей

Для статьи нужно показать короткие suggest-вопросы или подсказки. Как получить их из текста статьи и не ухудшить качество поиска?

RAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как заранее понять пользу audio-event фичи

Есть новая возможность: по аудио понять событие вокруг пользователя, например лай собаки, открытие двери или разбитое стекло. Как до обучения модели понять, есть ли продуктовая польза?

Постановка задачи
Sber / GigaChat
Проектирование ML-системСредняя
Как оптимизировать LLM inference pipeline

Как оптимизировать LLM inference pipeline: routing, batching, serving, latency и стоимость? Какие рычаги ускорения и удешевления стоит назвать?

Вывод модели и архитектураRAG и LLM-системы
Huawei
Проектирование ML-системСредняя
Как оценивать качество RAG-системы

Как оценивали качество: насколько хорошо получается вести диалог, отвечать на вопрос или искать нужные документы?

Мониторинг и надёжностьRAG и LLM-системы
Satel Generation
Проектирование ML-системСредняя
Как оценивать поиск/RAG по статьям offline и online

Как понять, что система поиска по статьям или RAG работает хорошо? Какие offline и online метрики использовать?

Вывод модели и архитектураRAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как поставить задачу раннего VIP-прогноза

В casino-продукте sales-команде нужно как можно раньше понять, станет ли новый игрок VIP по депозитам и обороту. Как сформулировать ML-задачу, target, горизонт прогноза и бизнес-действие?

Постановка задачиДанные и признаки
MrBit
Проектирование ML-системСредняя
Как построить модель распознавания аудио-событий

Как технически построить модель, которая по аудио определяет событие: лай собаки, звук двери, разбитое стекло и похожие классы?

Данные и признаки
Sber / GigaChat
Проектирование ML-системСредняя
Как посчитать поток событий для CTR dashboard

Нужно построить систему, где рекламодатель смотрит CTR кампаний. Дано 200 млрд показов в день и CTR около 1%. Как начать system design с чисел?

Постановка задачи
Компания не указана
Проектирование ML-системСредняя
Как проверить, стоит ли менять LLM на новую open-source модель

Вышла новая open-source LLM. Как проверить, станет ли она лучше текущей модели в продукте и стоит ли ее внедрять?

Вывод модели и архитектураRAG и LLM-системы
FlameTree
Проектирование ML-системСредняя
Как работает токенизатор и зачем его обучать

Интервьюер просит рассказать про токенизатор: какие бывают алгоритмы, как он работает и нужно ли его обучать под домен или язык?

RAG и LLM-системы
FlameTree
Проектирование ML-системСредняя
Как разделить suggest и свободный поиск по статьям

В продукте есть база статей. Пользователь может видеть подсказки или задавать свободный вопрос. Как разделить эти два режима в дизайне поиска?

Постановка задачиRAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как собрать данные и классы для модели модерации

Для moderation-модели нужны классы и данные. Как собрать labels, обработать дисбаланс и не смешать разные политики в один шумный датасет?

Данные и признаки
Satel Generation
Проектирование ML-системСредняя
Как сформулировать ML System Design-задачу подбора поставщиков

Fairmarkit -- маркетплейс для корпоративных закупок: заказчик создает заявку, а система предлагает подходящих поставщиков. Как сформулировать ML-задачу подбора поставщиков перед выбором модели?

Постановка задачи
Fairmarkit
Проектирование ML-системСредняя
Как считать online-фичу нагрузки курьеров

В delivery pricing модели нужна фича нагрузки курьеров. Из каких событий и состояний ее считать, чтобы она была пригодна для online decisioning?

Данные и признакиВывод модели и архитектура
Dodo
Проектирование ML-системСредняя
Как устроить BERT-based moderation inference service

Нужно развернуть сервис модерации текста на BERT/DistilBERT. Как спроектировать input/output, policy layer, thresholds и routing actions?

Вывод модели и архитектура
Satel Generation
Проектирование ML-системСредняя
Как учитывать категории и комплементарность в корзине

Если пользователь добавил кольцо, стоит ли рекомендовать еще кольца? Как сформулировать цель и ограничения для рекомендаций в корзине?

Постановка задачи
GRII RED
Проектирование ML-системСредняя
Как часто пересчитывать стоимость доставки в корзине

Клиент видит стоимость доставки или порог бесплатной доставки в корзине. Каталог и корзина меняются, а на чек-ауте нельзя показать другую цену и вызвать негатив. Как спроектировать пересчет и где провести границу между точностью, latency и стоимостью?

Постановка задачиДанные и признакиВывод модели и архитектура
Dodo
Банк вопросов из реальных собеседований — ML Mentor