Шаблон документа для дизайна ML-систем от телеграм-канала Reliable ML
ML System Design документ - это по сути сводный план по построению системы машинного обучения для решения конкретного запроса бизнеса в вашей компании. Его стоит применять на этапе дизайна вашей системы, чтобы в итоге ваше решение было полезным для бизнеса, а именно: могло быть внедрено, работало после внедрения и приносило реальную пользу.
А для того, чтобы этот план было проще построить, и чтобы итоговая система, действительно, приводила к результату, мы в сообществе Reliable ML разработали шаблон такого документа.
Шаблон был успешно адаптирован уже в более 10 крупных компаниях на российском рынке, а также внедрен Университетом ИТМО в программу онлайн-магистратуры по ML-инженерии как ключевой инструмент планирования ML-проектов.
Дизайн-документ, созданный на этапе проектирования системы, помогает Data Science подразделению:
- Структурировать собственные мысли: БТ, архитектура решения, результат, применение
- Задать все критические вопросы бизнесу, уточнить бизнес-требования
- Понять бизнес-процесс и нюансы применения ML-системы
- Понять, что реализация проекта возможна и какие ожидают трудности
- Синхронизировать ожидания технической и бизнес-команд
- Установить стандарты работы
- Скачать шаблон документа от Reliable ML и загрузить его в общее рабочее пространство вашей компании или сделать форк репозитория и работать в нем
- Прочитать краткие рекомендации по процессу заполнения документа (workflow) - здесь.
- Посмотреть детальный доклад о том, что такое ML System Design Doc и о том, как, когда и зачем его составлять - тут.
- Если остались вопросы - заглянуть в раздел допматериалов.
- Приступить к работе!
- Прогнозирование выручки в магазинах - FMCG компания. Автор: Михаил Масагутов. Бизнес цель – замена ручной работы прогнозами модели, которые будут использоваться для: составления плана продаж в магазинах на следующие 6 месяцев и сегментации магазинов на основе продаж для применения определенной стратегии взаимодействия. Доклад автора об опыте составления дизайн-документа.
- Рекомендательная система для сделок по аренде недвижимости - Девелопер коммерческой недвижимости. Автор: Никита Артемьев. Бизнес-цель – с помощью увеличения релевантности предложения компании для клиента повысить среднюю конверсию из лида в успешную сделку для арендаторов.
- Сервис кластеризации магазинов - Лента. Автор: Любава Ткаченко. Бизнес-цель - помочь бизнесу в быстром принятии решений с помощью инструмента для автоматической группировки магазинов по базовым метрикам, важным для ритейла. Один из типовых возможных сценариев использования инструмента - адаптация CVP (Customer Value Proposition) с учетом кластеров. Доклад автора об опыте составления дизайн-документа.
- Антифрод система для проведения транзакций в банке - ML System Design Doc Challenge, Data Fest 2023. Авторы: Дмитрий Науменко, Сергей Артюхин, Артем Савельев, Эдуард Поляков, Сабрина Садиех. Бизнес-цель - увеличение эффективности банковской системы антифрода для снижения финансовых и репутационных рисков связанных с мошенническими действиями. Выступление и презентация авторов дизайн-дока на финале контеста ML System Design Doc Challenge, проводимого Мариной Завгородней на Data Fest 2023.
- PostFinder - Чат-бот для поиска ответов в телеграм-каналах. Авторы: Данил Картушов, Тимбал Данил, Устинов Кирилл, Соколов Федор, Дмитрий Клименченко. Бизнес-цель - Улучшение доступа к информации в телеграм-каналах через автоматизированный поиск ответов с помощью чат-бота.
- Команда Reliable ML готова помочь вам с работой над составлением дизайн-документа - включая ревью самой системы.
- В приоритете проекты, которые готовы выложить финальный документ в открытый доступ (без NDA части) - как в разделе выше.
- Пишите @irina_goloshchapova и @promsoft
- О поиске идей для ML-проектов и о дизайн-документе простыми словами (лекция, слайды)
- Детально о работе с дизайн-доком (лекция, слайды)
- Про интеграцию ML-моделей в бизнес-процессы (лекция, слайды)
- Курс ML System Design 2023 и ML System Design 2022
- Критерии оценки дизайн-документов от ИТМО & Reliable ML
- Шаблон ML System Design Doc [EN] от AWS и статья с объяснением каждого раздела
- Верхнеуровневый шаблон ML System Design Doc от Google и описание общих принципов его заполнения.
- ML Design Template от ML Engineering Interviews
- Статья Design Documents for ML Models на Medium. Верхнеуровневые рекомендации по содержанию дизайн-документа и объяснение, зачем он вообще нужен
- Краткий Canvas для ML-проекта от Made with ML. Подходит для верхнеуровневого описания идеи, чтобы понять, имеет ли смысл идти дальше.