Эффективность внедрения ИИ — это разница между тем, как процесс работал до запуска и как он работает после, измеренная на показателях, о которых договорились заранее. Не впечатление от демонстрации и не число запросов к агенту, а часы, сроки, ошибки и объём работы на том же участке.
Главная причина, по которой эффект «не виден», — его никто не измерил до старта. Без исходной точки сравнивать не с чем. Ниже — какие эффекты бывают, какие показатели снять заранее, как перевести их в деньги и где освобождённое время теряется.
Какие эффекты внедрения ИИ бывают
Эффект от ИИ редко один. Обычно процесс меняется сразу по нескольким осям, и важно заранее решить, какая из них главная для вашей задачи.
| Эффект | Что измеряем | Как это выглядит в процессе |
|---|---|---|
| Время сотрудников | часы на операцию в неделю | менеджер перестал вбивать заявки вручную |
| Скорость процесса | время от входа до результата | заказ оформлен за минуты, а не к концу дня |
| Пропускная способность | сколько единиц работы за период | отдел обрабатывает больше заявок тем же составом |
| Качество | доля ошибок и возвратов | меньше счетов с неверной ценой или остатком |
| Управляемость | видно ли, где застряла работа | руководитель видит статус каждой заявки |
Время сотрудников — самый понятный эффект, но не всегда самый ценный. Для отдела, который теряет клиентов из-за медленного ответа, важнее скорость. Для производства, где ошибка в инструкции стоит дорого, — качество. Если главную ось не выбрали, каждый участник проекта будет оценивать результат по своей.
Как измерить эффективность внедрения ИИ: пять шагов
Оценка эффективности внедрения ИИ начинается до разработки, а не после запуска. Порядок ниже занимает несколько дней, а без него спор о результате может тянуться месяцами.
Порядок замера
Шаг 1
Опишите процесс как естьПо факту, а не по регламенту.Шаг 2
Снимите исходные показатели2–3 недели наблюдения до старта работ.Шаг 3
Договоритесь о критерии «выполнено»Иначе спор о результате нельзя выиграть.Шаг 4
Уберите параллельную ручную работуДвойная работа съедает весь эффект.Шаг 5
Сравните те же показателиТот же формат и тот же срок, что и до запуска.
1. Опишите процесс так, как он работает сейчас
Не по регламенту, а по факту: кто получает заявку, где её сверяет, куда переносит, кому передаёт. Разбор процесса — первый этап любого нашего проекта. Именно на нём часто выясняется, что заметная часть времени уходит не на саму операцию, а на поиск данных и уточнения.
2. Снимите исходные показатели
В течение 2–3 недель фиксируйте то, что будете сравнивать: сколько заявок пришло, сколько времени ушло на каждую, сколько вернулось с ошибкой. Хватит таблицы, которую ведут сами сотрудники. Точность до минуты не нужна, нужна честная картина.
3. Договоритесь о критерии «задача выполнена»
Что считается правильно оформленным заказом? Какой курс считается готовым? Если критерий не записан, после запуска начнётся спор о том, хорошо ли работает агент. Этот спор нельзя выиграть: у каждого своё представление о норме.
4. Уберите параллельную ручную работу
Если агент запущен, а сотрудники продолжают делать то же самое руками «на всякий случай», время не освобождается, а тратится дважды. На время проверки нужен один назначенный человек, который сверяет результат агента. Остальные переходят на новый порядок сразу.
5. Сравните те же показатели через тот же срок
Снимите цифры в том же формате и за такой же период, что и до запуска. Сравнивайте сопоставимое: месяц с месяцем, сезон с сезоном. Первые недели после запуска уходят на настройку, их в итог лучше не включать.
Какие показатели брать для разных процессов
Универсальной метрики нет. Ниже — с чего начать на типовых участках, где ИИ-агенты уже работают в компаниях.
| Процесс | Основной показатель | Дополнительный |
|---|---|---|
| Заявки и заказы в 1С | время от заявки до счёта | доля заказов, вернувшихся на исправление |
| Курсы и тесты для сотрудников | срок подготовки курса | сколько материалов превращено в обучение |
| Производство контента | единиц контента в неделю | время на согласование одной единицы |
| Подбор персонала | срок закрытия вакансии | сколько кандидатов теряется между этапами |
| Ответы по внутренней базе знаний | время на поиск ответа | сколько вопросов уходит руководителю |
Для обработки заявок подробности — на странице ИИ-оператора для заявок, заказов и счетов в 1С. Для обучения — в разделе о создании курсов и тестов из рабочих материалов. Общий каталог задач, которые передают агентам, — в каталоге ИИ-агентов для процессов компании.
Почему внедрение ИИ не приносит прибыли, хотя агент работает
Бывает, что агент честно делает свою работу, а в финансовом результате изменений нет. Причины почти всегда организационные.
Освобождённые часы ничем не заняли. Допустим, менеджер тратил два часа в день на перенос заявок, а теперь не тратит. Но новых задач ему не дали, и эти часы растворились. Время превращается в деньги, только когда у него есть назначение: больше звонков клиентам, больше обработанных заказов, меньше найма.
Автоматизировали редкую операцию. Если задача случается пару раз в месяц, разбор и настройка займут больше времени, чем сама работа за год. Эффект виден там, где операция повторяется десятки раз в неделю.
Меряли не то. Число диалогов с агентом или сгенерированных документов — это активность, а не результат. Руководителю нужны показатели процесса: сроки, ошибки, объём.
Нет исходной точки. Без цифр «до» любой результат можно назвать и успехом, и провалом. Обычно побеждает мнение самого громкого участника совещания.
Процесс оставили прежним. ИИ встроили в старую последовательность шагов с теми же согласованиями. Операция ускорилась, но работа всё равно ждёт подписи в очереди. Поэтому принцип ИНОБО — сначала процесс, потом ИИ.
Об организационных причинах сорванных проектов подробнее — в статье о том, как устроено внедрение ИИ-агентов по этапам.
Как посчитать окупаемость внедрения ИИ
Расчёт делается в два шага: сначала часы, потом деньги. Часы считаются из исходных показателей, деньги — из вашей же ведомости.
Формула для первого шага: число сотрудников × часы повторяющейся работы в день × 21 рабочий день.
Пример расчёта, не результат проекта. В отделе 4 человека оформляют заказы, каждый тратит на ввод и сверку около 3 часов в день. Получается 252 часа в месяц. Если на разборе выяснилось, что правилом описывается половина случаев, речь идёт о 126 часах — примерно 16 рабочих днях ежемесячно.
Второй шаг — умножить эти часы на полную стоимость часа сотрудника: зарплата, налоги, рабочее место. Эту цифру знает только ваша бухгалтерия. Результат сравнивают с затратами на разработку и сопровождение и получают срок, за который проект возвращает вложения.
К этому добавляют то, что в часах не выражается. Сколько стоит одна ошибка в счёте? Сколько клиентов уходит, не дождавшись ответа? Такие эффекты сложнее посчитать, но иногда именно они решают вопрос.
По оценке McKinsey Global Institute из отчёта The economic potential of generative AI (2023), генеративный ИИ в принципе применим к работе, которая занимает до 60–70 % рабочего времени сотрудников. Это отраслевая оценка технической возможности, а не прогноз экономии. Сколько из неё применимо у вас, показывает только расчёт на ваших цифрах.
Что показывают наши проекты
Три подтверждённых результата конкретных внедрений — и какой тип эффекта за каждым стоит.
- Обучение на производстве. После внедрения системы обучения с курсами, тестами и базой знаний подготовка курса сократилась примерно с 5 дней до 1 часа, теста — с 2 часов до 10 минут. По типу эффекта это скорость подготовки материалов.
- Производство контента. Связали поиск тем, сценарии, согласование, создание и анализ. В зафиксированный период недельный темп составил около 7 коротких видео, 3 каруселей и 7 текстовых публикаций. По типу эффекта это пропускная способность. Как устроен такой процесс, описано на странице контент-завода.
- HRM-система. Заявки на подбор, кандидаты и данные сотрудников велись в разных таблицах. Разработали HRM с воронкой подбора, интеграцией с hh.ru, кадровым учётом и аналитикой, запуск занял примерно 2 месяца. По типу эффекта это управляемость: подбор и кадровые данные собраны в одной системе вместо разных таблиц. Такие системы описаны в разделе о разработке CRM, HRM и корпоративных платформ.
Эти цифры относятся к конкретным компаниям и их процессам. Переносить их на другую компанию нельзя: другой процесс, другие данные, другая точка старта. Чтобы понять возможный эффект у вас, нужно разобрать ваш процесс.
Когда подводить итоги
Первую оценку делают через месяц после того, как агент перешёл в рабочий режим. К этому сроку заканчивается настройка и видно, как он справляется с исключениями.
Вторую — через квартал. За это время становится понятно главное: заняли ли освобождённые часы полезной работой и изменился ли результат отдела. Если через квартал показатели процесса не сдвинулись, проблема обычно не в агенте, а в одной из причин выше.
Сравнение методов автоматизации и подход к расчёту на своих цифрах разобраны в статье об автоматизации бизнес-процессов с помощью ИИ.
Частые вопросы
Первые изменения в операции заметны сразу после запуска, но оценивать их рано: первые недели уходят на настройку и разбор исключений. Первую честную оценку делают через месяц рабочего режима, вторую — через квартал, когда видно, заняли ли освобождённые часы полезной работой.
Можно оценить масштаб. Умножьте число сотрудников на часы повторяющейся работы в день и на 21 рабочий день — получится верхняя граница времени, о котором идёт речь. Какая доля этого объёма описывается правилом, выясняется на разборе процесса. Обещать точную цифру до разбора было бы нечестно.
Проверить три вещи. Отменили ли ручное выполнение той же операции. Получили ли сотрудники новые задачи вместо освободившихся часов. Меряете ли вы показатели процесса — сроки, ошибки, объём — или только активность агента. Чаще всего причина в одном из этих пунктов, а не в технологии.
Начните с простой таблицы на две-три недели: сколько единиц работы пришло, сколько времени ушло на каждую и сколько вернулось на исправление. Её могут вести сами сотрудники. Точность до минуты не нужна — нужна исходная точка, с которой потом можно сравнить тот же участок.
Разберём этот процесс в вашей компании
На бесплатной онлайн-экскурсии покажем, как устроены процессы внутри ИНОБО, и обсудим, что из этого применимо к вашей задаче.
Записаться на экскурсию
