Окупаемость пилота ИИ с учётом полной стоимости

Окупаемость пилота ИИ считайте по формуле: рентабельность инвестиций (ROI) = (подтверждённая выгода − полные затраты) / полные затраты × 100%. Выгоду сравнивайте с исходным процессом или контрольной группой, а в затраты включайте лицензию, интеграцию, подготовку данных, обучение, проверку человеком и исправление результатов.

Высокая скорость или большой объём обработанных задач ещё не означают, что пилот окупается. Решение о масштабировании обосновано, только если экономический эффект остаётся положительным после полного учёта расходов, качество проходит установленный порог, а результат повторяется на сопоставимых задачах.

Зафиксируйте исходную стоимость процесса

Выберите один ограниченный процесс: например, разбор обращений, подготовку карточек товаров или проверку документов. Сразу определите единицу результата — обработанное обращение, принятую карточку или документ, прошедший контроль качества.

До запуска измерьте объём операций, рабочее время сотрудников, продолжительность полного цикла, долю ошибок, число возвратов и прямые потери от брака. Стоимость единицы исходного процесса равна сумме затрат на рабочее время и связанных операционных расходов, делённой на число принятых результатов.

Рекомендации AWS по оценке результата предлагают начинать с полной стоимости действующего процесса, сравнивать с ней финансовые и операционные показатели, учитывать допустимую частоту ошибок и заранее задавать точки прекращения неэффективного проекта.

Отделите эффект ИИ от других изменений

По возможности одновременно распределите сопоставимые операции между пилотной и контрольной группами. Первая использует ИИ, вторая сохраняет прежний процесс. Сложность задач и правила оценки должны быть одинаковыми: иначе более простой поток создаст видимость улучшения.

Если параллельная контрольная группа невозможна, сравнивайте пилот с исходным периодом, корректируя результат с учётом объёма и состава задач. Не объединяйте экономию времени, дополнительную прибыль и предотвращённые потери без отдельного расчёта каждого эффекта.

Подтверждённая выгода за период может состоять из стоимости действительно высвобождённой нагрузки, дополнительной валовой прибыли и документированных предотвращённых потерь. Высвобождённые часы имеют денежную ценность, только если компания сократила оплачиваемую нагрузку либо использовала их для измеримого дополнительного объёма. Новую ручную работу, включая проверку и исправления, учитывайте в затратах, чтобы не вычесть её дважды.

Соберите полную стоимость пилота

В знаменатель формулы должны попасть все ресурсы, без которых эксперимент не состоялся бы. Методика Unframe включает в полную стоимость технологии и инфраструктуру, разработку, приобретение и подготовку данных, обучение пользователей, интеграцию и дальнейшую эксплуатацию.

Технология: подписки, запросы к API, вычисления, хранение данных и наблюдение за системой.
Внедрение: работа разработчиков, подрядчиков, руководителя проекта и сотрудников, описывающих процесс.
Данные: выгрузка, очистка, обезличивание, разметка и устранение неполных записей.
Интеграция: подключение CRM, учётной системы, базы знаний, прав доступа и журналирования.
Эксплуатация: обучение сотрудников, поддержка, обновление инструкций и разбор сбоев.
Контроль качества: проверка человеком, повторные запуски, исправление результата и устранение последствий ошибок.

Разделите разовые и переменные расходы. Разработка интеграции обычно относится к разовым затратам, а обращения к модели и проверка каждой операции — к переменным. Для прогноза рабочего объёма разовые расходы можно распределить на ожидаемое число операций, но исключать их из оценки окупаемости нельзя.

Считайте стоимость принятого результата

Главная производственная метрика — стоимость результата, принятого по итогам всего процесса. Разделите сумму затрат на модель, инфраструктуру, проверку и исправления на число результатов, которые после контроля можно использовать без дальнейшей доработки.

Дополнительно фиксируйте выбранную метрику качества, долю серьёзных ошибок, среднее время проверки, число повторных запусков и процент задач, полностью переданных человеку. Для клиентского процесса полезны жалобы и повторные обращения, для документов — пропуски обязательных полей и неверные значения. Рост скорости не компенсирует неприемлемое качество.

Переменные расходы нельзя надёжно оценить по нескольким удачным запускам. В исследовании восьми передовых языковых моделей на SWE-bench Verified анализ расхода токенов в агентных задачах программирования показал разницу до 30 раз между запусками одной задачи; больший расход токенов не обеспечивал более высокой точности. Этот результат нельзя автоматически переносить на любой бизнес-процесс, но он подтверждает необходимость учитывать каждый запуск и повтор, а не единственное среднее наблюдение.

Проведите измерение за 30–90 дней

Измерение пилота ИИ от исходного процесса до расчёта стоимости каждого принятого результата с учётом повторов и ручных исправлений

Дни 1–14: определите единицу результата, измерьте исходную стоимость, качество и время цикла. Установите допустимую долю серьёзных ошибок.
Дни 15–30: запустите ограниченную пилотную и, если возможно, контрольную группу. Включайте настройку и обучение в расходы, даже когда работу выполняют штатные сотрудники.
Дни 31–60: накопите сопоставимые операции. Отдельно отмечайте повторные обращения к модели, ручные проверки, исправления и отклонённые результаты.
Дни 61–90: пересчитайте ROI и стоимость принятой единицы. Для прогноза на рабочий объём используйте фактическую переменную стоимость и отдельно добавьте ожидаемые расходы на поддержку.

Условный пример: подтверждённая выгода пилота составила 500 000 денежных единиц, а лицензии, интеграция, данные, обучение, проверка и исправления обошлись в 400 000. ROI равен (500 000 − 400 000) / 400 000 × 100% = 25%. Если исключить из расчёта 150 000 на проверку и исправления, затраты сократятся на бумаге до 250 000, а ошибочный показатель вырастет до 100%.

Задайте правило масштабирования и остановки

До запуска установите три порога: минимальный ROI или максимальный срок окупаемости, допустимую стоимость принятой единицы и предельную долю серьёзных ошибок. Масштабирование оправдано, когда выполнены все пороги, результат сохраняется на разных типах сопоставимых задач, а прогноз учитывает поддержку и переменные расходы.

Если экономика положительна, но качество не проходит порог, пилот не готов к расширению. Если приемлемое качество достигается лишь ценой интеграции и ручной проверки, после которых исчезает экономический эффект, процесс следует изменить или пилот остановить. Продолжать пограничный эксперимент имеет смысл только ради конкретной проверяемой гипотезы, с новым сроком и пределом дополнительных затрат.

Пилот ИИ кажется успешным, пока не посчитаны интеграция и исправления