ММООЗЗГГ.ru

Инструкция

Как оценить эффективность внедрения ИИ, если метрики не было до старта

6 мин3 источника

Как оценить эффективность внедрения ИИ, если до старта никто не записал цифру? Никак: после запуска сравнивать не с чем, и эффект превращается в мнение. Ниже, как выбрать одну метрику в рублях, записать ее в договор и через 14 дней получить отчет с тремя числами.

На странице · 6 разделов

Почему эффект не виден

По отчету MIT NANDA 2025 года 95% организаций не получили измеримой отдачи от генеративного ИИ. Слово «измеримой» здесь главное: без замера даже работающий ИИ выглядит как расход. В обзоре McKinsey (ноябрь 2025) та же картина с другой стороны: ИИ используют 88% организаций, а влияние на операционную прибыль видят 39%. Пользоваться ИИ и видеть его эффект в деньгах оказываются разными задачами.

Типичная картина: систему запустили, сотрудники говорят, что стало удобнее, а финансовый директор не видит изменений в отчетах. Через полгода проект закрывают как дорогой.

Первая причина: успех мерили тем, что система запущена. Запуск говорит о работе подрядчика, а не о деньгах компании.

Вторая причина: метрику выбрали после старта. Тогда нет точки «до», и любую цифру можно объяснить сезоном, новым менеджером или рекламой.

Третья причина: метрик слишком много. Отчет из двадцати показателей никто не читает, и решений по нему не принимают.

Одна метрика в рублях

Одна метрика на один процесс. Если метрик пять, по одной будет рост, по другой падение, и спор не закончится.

Метрика должна считаться в вашей системе без ручного подсчета: в CRM, в системе записи, в телефонии. Иначе цифру будут оспаривать.

Метрика должна зависеть от ИИ. Выручка компании зависит от сезона, цен и рекламы, поэтому на пилоте ее не меряют. Время ответа на заявку зависит от агента напрямую.

Примеры для типовых процессов. Заявки: время до первого ответа и доля заявок, заведенных в CRM; запись: доля обращений, которые закончились записью без администратора; поддержка: доля вопросов, закрытых без оператора.

Каждую такую метрику переводят в рубли. Время ответа влияет на долю заявок, которые доходят до сделки. Вопросы без оператора превращаются в часы сотрудников, а часы умножаются на зарплату с налогами.

Как посчитать эффект в рублях по каждому решению, вместе с вложениями и сроком окупаемости, разобрано в материале про расчет эффекта.

Метрика в договоре

Метрика в презентации ни к чему не обязывает. Метрика в договоре обязывает обе стороны: подрядчик знает, за что отвечает, вы знаете, что принимаете.

В договор записывают три вещи: какую цифру меряем, какое у нее значение сейчас и в какой системе она считается. Значение «сейчас» замеряют до старта, в вашей же системе.

Дату проверки тоже записывают в договор. Без даты проверка откладывается, а проект продолжает получать деньги.

Так устроен наш пилот: один ИИ-агент на одном процессе, от 149 000 ₽, 14 дней, метрика в договоре. Что входит и как выбираем метрику, подробно в статье о пилоте ИИ-агента.

Если подрядчик отказывается записывать метрику, это сигнал: он не уверен в результате или не понимает ваш процесс.

Что проверить до старта

Перед запуском ответьте на четыре вопроса. Если на один из них ответа нет, запуск переносят, пока ответ не появится, а не начинают в расчете разобраться по ходу.

1. Какую одну цифру меняет ИИ и в какой системе она считается.

2. Какое у нее значение сейчас, за какой период его сняли и кто его проверил.

3. Сколько стоит единица этой цифры в рублях: час сотрудника с налогами, потерянная заявка, лишний звонок оператора.

4. Кто принимает отчет и в какой день.

Условный пример. Сеть клиник видит, что администраторы не успевают отвечать в мессенджерах по вечерам. Метрика: доля обращений, которые закончились записью без администратора. Значение до старта берут из системы записи за последний полный месяц, цену одной записи из среднего чека клиники. Через 14 дней у руководителя три числа, а не впечатления администраторов.

Ответы на эти вопросы стоят дешевле самого пилота. Если компания не может их дать, ей сначала нужен учет в своей системе, а потом ИИ.

Отчет с тремя числами

В конце пилота вы получаете отчет с тремя числами: метрика до старта, метрика в последние дни пилота, когда агент уже обучен, и доля случаев, которые агент передал человеку.

Первые дни пилота в расчет не идут: агент учится на ваших правилах и переписках, и цифра в начале занижена.

Третье число важно не меньше первых двух. Если агент передает людям большую часть обращений, метрика может вырасти за счет людей, а не ИИ. Доля передач показывает, сколько работы на самом деле ушло агенту.

Отчет читают первое лицо и финансовый директор, поэтому числа в нем идут в рублях и процентах, без технических терминов.

По трем числам решение принимают за один разговор: оставить агента, расширить его на другие процессы или остановиться. Дальше эти метрики ведет ИИ-департамент компании, как это устроено, описано на странице про KPI внедрения ИИ.

Что делать, если цифра не выросла

Неудачный пилот с метрикой полезнее удачного без нее: вы знаете, почему не получилось, и потратили на это 14 дней, а не год.

Причину видно в диалогах агента. Обычно их три: агенту не хватило сведений для ответов, процесс оказался не таким, как его описали, или сотрудники не отдавали агенту обращения.

Если не хватило сведений, дополняют базу знаний и правила. Если процесс другой, выбирают процесс, где потери больше и метрика считается проще. Если люди обходят агента, вопрос к ответственному и к обучению, а не к технологии.

Не продлевайте пилот в надежде, что цифра вырастет сама. Если за срок пилота метрика не сдвинулась, продление обычно лишь откладывает тот же вывод.

Если окупаемости нет, мы пишем это в отчете. После пилота три варианта: остановиться, оставить агента на сопровождении от 40 000 ₽ в месяц с отказом в любой месяц или собрать ИИ-отдел из 3–5 агентов.

Вопросы и ответы

Какую метрику выбрать для первого проекта с ИИ?

Ту, что зависит от ИИ напрямую и считается в вашей системе без ручного подсчета. Для заявок это время до первого ответа, для поддержки доля вопросов, закрытых без оператора, для записи доля обращений, закончившихся записью без администратора. Выручку компании на пилоте не меряют: на нее влияют сезон, цены и реклама.

Как замерить значение до старта, если учета нет?

Сначала настраивают учет в той системе, где потом будут мерить результат: в CRM, телефонии или системе записи. Пилот запускают, когда в ней накопилась цифра хотя бы за полный рабочий цикл, например за месяц. Оценка руководителя отдела «на глаз» или цифра из презентации подрядчика для сравнения не годятся.

Когда эффект от ИИ виден в отчетности компании?

На одном процессе эффект виден в конце пилота, через 14 дней: метрика до старта против метрики в последние дни. В общей прибыли он заметен позже, когда ИИ работает на нескольких процессах. По McKinsey (ноябрь 2025) ИИ используют 88% организаций, а влияние на операционную прибыль видят 39%, поэтому эффект считают по каждому процессу отдельно и потом складывают.

Что делать, если подрядчик не хочет записывать метрику в договор?

Спросить, какую цифру он сам считает результатом и в какой системе ее проверить. Если ответа нет, подрядчик не уверен в результате или не понял ваш процесс. Без метрики в договоре вы платите за запуск, а не за эффект, и спорить о результате потом не с чем.

Источники и проверка

Проверено редакцией 13 октября 2026.

  1. MIT NANDA: The GenAI Divide, State of AI in Business 2025 (PDF) (mlq.ai)
  2. Virtualization Review: MIT report finds most AI business investments fail, reveals GenAI Divide (virtualizationreview.com)
  3. IT Brief: McKinsey State of AI, ИИ используют 88% организаций, 11 ноября 2025 (itbrief.co.uk)

Нашли ошибку? Напишите нам

Публикации

Как создать чат-бот в Максе: инструкция для компании

Чтобы создать чат-бот в Максе, компании нужно пройти четыре шага на платформе MAX для партнеров: проверить профиль организации через Госуслуги, заполнить карточку бота, дождаться модерации до 48 часов по рабочим дням и собрать сценарий в конструкторе или своим кодом. Ниже каждый шаг по документации MAX, проверенной 16 октября 2026 года, а также как связать бота с сайтом, CRM и командой и на чем бо

ИнструкцияИТСредний11 мин
Написать в Telegram