Назад к тренажеру

Банк вопросов из реальных собеседований

Направления, темы и вопросы из записей интервью. Фильтры ниже сохраняются в ссылке.

Все вопросы

673 вопроса из реальных интервью

Открыть в общем банке
Темы
Сложность
Компания
Язык
Проектирование ML-системСредняя
Зачем рекомендательная система, если заказчик может вручную менять поставщиков

Заказчик может удалить предложенных поставщиков и добавить своих. Как объяснить ценность рекомендательной системы в таком продукте и какие метрики из этого следуют?

Fairmarkit
Проектирование ML-системСредняя
Из каких компонентов состоит LLM-агент

Нужно объяснить архитектуру LLM-агента: какие основные блоки нужны, где хранится контекст и как агент вызывает инструменты.

Вывод модели и архитектураRAG и LLM-системы
Flametree
Проектирование ML-системСредняя
Инференс-пайплайн и cold start в подборе поставщиков

Как обработать новый закупочный запрос и что делать с новыми закупщиками, новыми поставщиками и редкими категориями?

Вывод модели и архитектураМониторинг и надёжность
Fairmarkit
Проектирование ML-системСредняя
Как LLM работает на инференсе

Интервьюер просит объяснить базовый inference loop LLM: что подается на вход, что модель возвращает и как получается следующий токен.

Вывод модели и архитектураRAG и LLM-системы
FlameTree
Проектирование ML-системСредняя
Как offline-предсказания попадают в production

Если embeddings, scores или recommendation lists считаются offline и лежат в S3/DWH, как безопасно передать эти результаты backend/serving-слою?

Вывод модели и архитектураМониторинг и надёжность
GamerAM
Проектирование ML-системСредняя
Как VLM обрабатывает изображение вместе с текстом

Как visual language model принимает картинку на вход: что делает vision encoder, как появляются visual tokens и как они совмещаются с текстом?

Вывод модели и архитектураRAG и LLM-системы
Huawei
Проектирование ML-системСредняя
Как встроить модель возврата в продукт

Модель уже умеет предсказывать вероятность возврата. Как ее применить в продукте и где хранить признаки?

Данные и признакиВывод модели и архитектура
Mayflower
Проектирование ML-системСредняя
Как выкатывать новые признаки и модели в сервис ранжирования

Команда хочет добавить новые признаки или модель в ранжирующий сервис. Как сделать это безопасно?

Данные и признакиМониторинг и надёжность
Uzum
Проектирование ML-системСредняя
Как генерировать suggest-вопросы из статей

Для статьи нужно показать короткие suggest-вопросы или подсказки. Как получить их из текста статьи и не ухудшить качество поиска?

RAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как заранее понять пользу audio-event фичи

Есть новая возможность: по аудио понять событие вокруг пользователя, например лай собаки, открытие двери или разбитое стекло. Как до обучения модели понять, есть ли продуктовая польза?

Постановка задачи
Sber / GigaChat
Проектирование ML-системСредняя
Как оптимизировать LLM inference pipeline

Как оптимизировать LLM inference pipeline: routing, batching, serving, latency и стоимость? Какие рычаги ускорения и удешевления стоит назвать?

Вывод модели и архитектураRAG и LLM-системы
Huawei
Проектирование ML-системСредняя
Как оценивать качество RAG-системы

Как оценивали качество: насколько хорошо получается вести диалог, отвечать на вопрос или искать нужные документы?

Мониторинг и надёжностьRAG и LLM-системы
Satel Generation
Проектирование ML-системСредняя
Как оценивать поиск/RAG по статьям offline и online

Как понять, что система поиска по статьям или RAG работает хорошо? Какие offline и online метрики использовать?

Вывод модели и архитектураRAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как поставить задачу раннего VIP-прогноза

В casino-продукте sales-команде нужно как можно раньше понять, станет ли новый игрок VIP по депозитам и обороту. Как сформулировать ML-задачу, target, горизонт прогноза и бизнес-действие?

Постановка задачиДанные и признаки
MrBit
Проектирование ML-системСредняя
Как построить модель распознавания аудио-событий

Как технически построить модель, которая по аудио определяет событие: лай собаки, звук двери, разбитое стекло и похожие классы?

Данные и признаки
Sber / GigaChat
Проектирование ML-системСредняя
Как посчитать поток событий для CTR dashboard

Нужно построить систему, где рекламодатель смотрит CTR кампаний. Дано 200 млрд показов в день и CTR около 1%. Как начать system design с чисел?

Постановка задачи
Компания не указана
Проектирование ML-системСредняя
Как проверить, стоит ли менять LLM на новую open-source модель

Вышла новая open-source LLM. Как проверить, станет ли она лучше текущей модели в продукте и стоит ли ее внедрять?

Вывод модели и архитектураRAG и LLM-системы
FlameTree
Проектирование ML-системСредняя
Как работает токенизатор и зачем его обучать

Интервьюер просит рассказать про токенизатор: какие бывают алгоритмы, как он работает и нужно ли его обучать под домен или язык?

RAG и LLM-системы
FlameTree
Проектирование ML-системСредняя
Как разделить suggest и свободный поиск по статьям

В продукте есть база статей. Пользователь может видеть подсказки или задавать свободный вопрос. Как разделить эти два режима в дизайне поиска?

Постановка задачиRAG и LLM-системы
AgeCode
Проектирование ML-системСредняя
Как собрать данные и классы для модели модерации

Для moderation-модели нужны классы и данные. Как собрать labels, обработать дисбаланс и не смешать разные политики в один шумный датасет?

Данные и признаки
Satel Generation
Проектирование ML-системСредняя
Как сформулировать ML System Design-задачу подбора поставщиков

Fairmarkit -- маркетплейс для корпоративных закупок: заказчик создает заявку, а система предлагает подходящих поставщиков. Как сформулировать ML-задачу подбора поставщиков перед выбором модели?

Постановка задачи
Fairmarkit
Банк вопросов из реальных собеседований — ML Mentor