Как проходит пилот ИИ-проекта: что вы получите и как решить, запускать ли дальше — Nadvan
Что такое пилот и чем он отличается от демо
Демо показывает возможности на примерах исполнителя: красиво и без вашей реальности. Пилот работает на вашей задаче и на части ваших данных, с вашими сотрудниками, в ограниченном объёме. На пилоте видно, где ответы точны, где модели не хватает материалов и какие интеграции действительно нужны. После него решение о запуске принимается на фактах, а не на ощущении.
Какая задача подходит для пилота
Хорошая первая задача для пилота отвечает на несколько простых вопросов:
- она повторяется каждый день или каждую неделю;
- для неё уже есть данные: тексты, документы, переписки, таблицы;
- результат легко проверить глазами сотрудника;
- ошибку заметит человек до того, как она нанесёт ущерб;
- в компании есть владелец задачи, который скажет, хороший ли получился результат.
Чем больше пунктов выполняется, тем проще пилот. Если не выполняется почти ни один, лучше начать с наведения порядка в данных или с обычной автоматизации.
Что входит в пилот
Формат пилота: срок [N] недель, объём работ и условия [подтвердить формат, срок и условия пилота]. По составу работ он выглядит так:
- Выбор задачи и показателей: что считаем успехом и как будем измерять.
- Подготовка данных: собираем материалы, согласуем, какие данные можно передавать модели.
- Сборка прототипа на выбранной модели: быстрое решение, достаточное для проверки идеи.
- Работа на реальных данных: небольшая группа сотрудников использует решение в рабочих вопросах.
- Разбор результатов: сравнение показателей до и после, список ошибок, решение, что делать дальше.
Что нужно от вас
- Данные по задаче: документы, примеры обращений, переписки.
- Владелец задачи, который принимает решение и оценивает результат.
- Сотрудники, которые пользуются решением и оценивают ответы, [N] человек на [N] недели.
- Согласование того, какие данные можно передавать модели, и обезличивание, если оно нужно.
Как решить: запускать, менять или остановить
| Что показал пилот | Решение |
|---|---|
| Показатели достигнуты, ошибки редкие и понятные | Запускаем: масштабируем на всех сотрудников или клиентов, подключаем нужные системы |
| Эффект есть, но ответы неточны из-за нехватки данных | Меняем: дополняем материалы, меняем модель или настройки и повторяем замер |
| Показатели не меняются, причина в самой задаче | Останавливаем: возвращаемся к выбору задачи или к обычной автоматизации |
Критерии для каждого решения записываем до пилота: так после него не приходится спорить, что считать успехом.
Что бывает после пилота
Если решение принято запускать, дальше идут масштабирование на всех пользователей, интеграции с CRM и учётными системами и поддержка после запуска [подтвердить условия поддержки]. Бот в мессенджере лучше сразу связывать с вашей CRM, а ассистента на ваших материалах можно запускать и без неё.
Чего пилот не показывает
- Поведение на полном объёме нагрузки: оно проверяется при запуске, а стоимость при масштабе мы оцениваем по замерам пилота.
- Редкие случаи: на небольшой выборке они могут не встретиться.
- Привыкание сотрудников: оно проявляется только со временем.
Начать с короткого разбора задачи можно на странице внедрения ИИ: nadvan.kz/ai. Мы работаем в Алматы + Казахстан.