# Как оценить результат корпоративного обучения нейросетям

Результат обучения нейросетям видно через месяц, а не в анкете. Что замерить до старта, какие цифры смотреть через 2-4 недели и какие файлы должны остаться.

URL: https://posts.danashkin.ru/guides/rezultat-korporativnogo-obucheniya-ii
Обновлено: 2026-10-04

---

## Коротко

**Главное**

- Результат корпоративного обучения нейросетям видно через две-четыре недели на рабочем месте. В день тренинга можно измерить только настроение группы.
- Нулевую точку снимают до первого занятия: три-пять типовых задач, время на каждую и кто уже пользуется нейросетями. Без неё через месяц сравнивать не с чем.
- Через две-четыре недели смотрят три цифры: какие сценарии сотрудники реально используют, сколько времени теперь уходит на типовые задачи и какая доля команды работает с нейросетями каждую неделю.
- После обучения в компании должны остаться файлы: промпты под задачи команды, шаблоны, настроенные ассистенты и записанные рабочие сценарии.
- О замере стоит договориться с провайдером обучения до оплаты. Для этого разговора хватит пяти вопросов.

## Почему анкета «понравилось» не показывает результат?

**Главное**

Анкета в конце дня измеряет реакцию на тренинг, а заказчику нужно поведение на рабочем месте. Люди отвечают вежливо и под впечатлением от дня, а применение начинается или не начинается через неделю. Высокая оценка ведущему ничего не говорит о том, изменилась ли работа.

Анкета удовлетворённости отвечает на вопрос «было ли интересно». Для руководителя, который заплатил за обучение, это самый слабый из возможных вопросов.

Причин две. Первая - вежливость. В социологии это называют эффектом социальной желательности: в опросах люди отвечают так, как это будет выглядеть хорошо в глазах других. Ведущий старался, коллеги рядом, день был насыщенный - поставить низкую оценку неловко.

Вторая причина - время. Анкету заполняют в пике впечатления, когда в голове ещё свежи удачные примеры. Проверка наступает позже: в понедельник, когда сотрудник открывает свой отчёт и решает, делать его по-старому или с нейросетью.

Поэтому «всем понравилось» - полезный сигнал для ведущего и почти бесполезный для заказчика. Замер, который работает вместо анкеты, начинается ещё до обучения.

## Что замерить до первого занятия?

**Главное**

Три вещи: три-пять типовых задач команды со временем на каждую, список того, кто и для чего уже пользуется нейросетями, и какие рабочие документы станут материалом упражнений. Это нулевая точка. Через месяц её сравнивают с новым замером, и разница становится результатом обучения.

Нулевая точка - это замер до обучения, с которым потом сравнивают всё остальное. Если её нет, через месяц разговор о результате превращается в обмен ощущениями.

Перед корпоративным обучением я прошу руководителей отделов описать от одного до трёх процессов. По каждому: как он устроен сейчас по шагам, кто его делает, как часто, сколько времени уходит за раз и есть ли образец документа.

Такая анкета закрывает сразу две задачи. Программа наполняется задачами самой команды, а заказчик получает таблицу «до», по которой через месяц можно считать эффект.

В нулевую точку стоит добавить ещё два пункта:

1. **Кто уже пользуется нейросетями.** Сколько человек из группы открывают их хотя бы раз в неделю и для каких задач.
2. **Какие файлы пойдут в упражнения.** Обезличенный договор, выгрузка, регламент, типовое письмо. Материал для упражнений и материал для замера лучше брать один и тот же.

Замер времени не обязан быть точным до минуты. Достаточно честной оценки того же человека по той же задаче: «еженедельная сводка - около трёх часов». Через месяц этот же человек называет новую цифру по той же сводке.

## Четыре уровня оценки обучения нейросетям

**Главное**

Классическая модель оценки обучения делит результат на четыре уровня: реакция, усвоение, поведение на рабочем месте и итог для бизнеса. Анкета закрывает только первый. Самые полезные данные лежат на третьем и четвёртом уровнях, и именно до них оценка доходит реже всего.

Модель четырёх уровней Дональда Киркпатрика используют для оценки корпоративного обучения с 1950-х годов. Уровни идут по нарастающей: реакция, усвоение, поведение, результат. На практике, как отмечает описание модели, оценка часто застревает на первых двух уровнях и не доходит до третьего и четвёртого, где лежат самые полезные данные.

Для обучения нейросетям уровни переводятся в конкретные замеры:

| Уровень | Вопрос | Что мерить | Когда | Откуда цифра |
|---|---|---|---|---|
| 1. Реакция | Понравилось ли? | оценка дня, полезность упражнений | в день обучения | анкета |
| 2. Усвоение | Получилось ли руками? | у каждого есть готовый файл по упражнению на своей задаче | в день обучения и между сессиями | папка с результатами |
| 3. Поведение | Применяют ли в работе? | какие сценарии используют, доля активных за неделю | через 2-4 недели | короткий разговор один на один |
| 4. Результат | Что изменилось в работе? | время на типовые задачи против нулевой точки | через 4 недели | повторный замер |

Практики этой модели советуют начинать проектирование с конца. Сначала решаешь, что должно измениться на четвёртом уровне, и только потом собираешь программу, упражнения и анкету.

## Какие цифры смотреть через две-четыре недели?

**Главное**

Три цифры: сколько рабочих сценариев из обучения реально используется, сколько времени теперь уходит на задачи из нулевой точки и какая доля группы работает с нейросетями каждую неделю. Две-четыре недели нужны, чтобы прошёл первый восторг и появилась привычка.

Через две-четыре недели после обучения видно, что стало привычкой. Раньше срок слишком короткий: люди ещё пробуют из любопытства. Позже картина размывается, и трудно понять, что дало обучение, а что другие изменения.

**Сценарии в работе.** Сценарий - это конкретная задача, которую человек делает с нейросетью по одной и той же схеме: протокол встречи из расшифровки, первый черновик ответа на претензию, сводка по выгрузке продаж. Считаешь, сколько сценариев из программы живут через месяц и у скольких людей.

**Время на типовые задачи.** Берёшь задачи из нулевой точки и просишь тех же людей назвать новое время. Разница по трём-пяти задачам и есть та цифра, которую можно пересчитать в часы и деньги.

**Доля активных.** Активным считаю того, кто за последнюю неделю хотя бы раз сделал рабочую задачу с нейросетью и может показать результат. В продуктовой аналитике похожая метрика называется числом активных пользователей за период.

**Не превращай метрику в план**

Если объявить долю активных показателем для отчёта, люди начнут открывать чат для галочки. Экономисты называют это законом Гудхарта: показатель, ставший целью, перестаёт измерять. Спрашивай результат, а не факт входа: «покажи последний файл, который ты сделал с нейросетью».

Какая цифра главная, зависит от цели обучения. На своих программах я до старта договариваюсь с заказчиком, какое обучение мы проводим: вдохновляющее или прикладное. Для вдохновляющего главная метрика - доля людей, которые начали пробовать. Для прикладного - внедрённые в работу инструменты.

Двухчасовой мастер-класс на большую аудиторию - формат вдохновляющий, и мерить его стоит по тому, сколько людей захотели продолжить. После одного такого мастер-класса из 45 участников 12 ушли в длительное обучение. Прикладной результат дают форматы с практикой на задачах самой команды.

Самый сильный ранний сигнал - применение без задания. На индивидуальном треке с руководителем я видел это дважды за две недели. Сначала она ночью загрузила в нейросеть пришедший документ на 30 страниц и нашла в нём нужное, не читая целиком. Через неделю сама собрала презентацию к совету директоров.

Собирать эти цифры лучше в коротком разговоре один на один, а не в общем чате. В группе люди стесняются рассказывать о своих результатах, и прогресс выглядит хуже, чем есть на самом деле. Подробно об этом эффекте - в статье про [три барьера внедрения ИИ в команде](/guides/tri-barera-vnedreniya-ii-v-komande).

## Какие артефакты должны остаться после обучения?

**Главное**

Файлы, которыми может воспользоваться коллега, который не был на обучении: библиотека промптов под задачи команды, шаблоны документов, настроенные ассистенты под роли, записанные пошагово рабочие сценарии и правила работы с данными. Если после обучения остались только впечатления и запись эфира, результат держится на памяти участников.

Артефакт обучения - это файл, который продолжает работать, когда участники забыли половину услышанного. Проверка простая: сможет ли им воспользоваться новый сотрудник, который на обучении не был.

Минимальный набор, который стоит требовать:

1. **Библиотека промптов под задачи команды.** Не общие примеры, а запросы под ваши отчёты, письма и договоры, с пометкой, для какой задачи каждый.
2. **Шаблоны документов.** Структура еженедельной сводки, коммерческого предложения, протокола встречи, в которую нейросеть подставляет содержание.
3. **Настроенные ассистенты или проекты под роли.** С загруженными правилами, образцами и инструкцией, как ими пользоваться.
4. **Рабочие сценарии, записанные по шагам.** Что загрузить, какой промпт дать, как проверить результат.
5. **Правила работы с данными на одной странице.** Что можно отправлять в нейросеть, что обезличивать и что нельзя совсем.

Всё это должно лежать в общем месте компании, а не в личных чатах участников. Такую общую папку с правилами, образцами и инструкциями я называю [вторым мозгом](/concepts/vtoroy-mozg) команды. Как устроить общий слой знаний, которым пользуется вся команда, разобрано в статье про [второй мозг команды](/guides/vtoroy-mozg-ne-odnogo-a-komandy).

Отдельная ловушка - слово «готово». Нейросеть охотно сообщает, что всё сделано, даже когда файла нет или он пустой. Артефакт засчитывается, когда его открыли и проверили глазами, об этом подробнее в статье [агент отчитался, а результата нет](/guides/agent-otchitalsya-a-rezultata-net).

## Что спросить у провайдера обучения заранее?

**Главное**

Пять вопросов про замер: какую нулевую точку снимут до старта, когда и как пройдёт срез после обучения, какие файлы останутся у компании, сколько времени участники работают руками и что провайдер делает, если через месяц применяют мало. По ответам видно, отвечает ли провайдер за результат или только за проведённый день.

Договориться о замере проще всего до оплаты. Если провайдер обучения сам поднимает эту тему, это хороший знак.

1. **«Какую нулевую точку вы снимаете до старта?»** Хороший ответ - анкета процессов или задач команды со временем на каждую.
2. **«Когда и как пройдёт срез после обучения?»** Ищи конкретный срок, две-четыре недели, и формат: разговор, анкета по сценариям, повторный замер.
3. **«Какие файлы останутся у нас и где они будут лежать?»** Промпты, шаблоны, ассистенты, записи - у компании, а не в личном кабинете ведущего.
4. **«Сколько времени участники работают руками?»** Практика на своих задачах и есть уровень усвоения.
5. **«Что вы делаете, если через месяц применяют мало?»** Разбор затыков, дополнительная сессия, ставка на тех, кто уже применяет.

Четвёртый вопрос кажется техническим, но он самый показательный. В разборах своих занятий я считаю две цифры: сколько минут участники работали руками и какая доля речи пришлась на ведущего. На одном индивидуальном занятии практика заняла 38 минут из 44. Такую цифру можно посчитать ещё в ходе обучения, не дожидаясь месяца.

Общий чек-лист выбора программы, с красными флагами и вопросами про безопасность данных, - в статье про то, [как выбрать корпоративное обучение нейросетям](/guides/korporativnoe-obuchenie-neyrosetyam-kak-vybrat). На своём [корпоративном интенсиве](https://danashkin.ru/workshop) я строю упражнения на задачах самой команды, поэтому материал для замера появляется ещё до первого занятия.

## План оценки обучения на месяц

**Главное**

Пять точек: нулевая точка за неделю до старта, файл результата по каждому упражнению в день обучения, один повтор на реальной задаче в первые 72 часа, срез один на один через две недели и повторный замер времени через четыре недели. Весь план умещается в одну таблицу.

План оценки лучше утвердить вместе с программой. Тогда он станет частью обучения, и о нём не придётся вспоминать через месяц.

1. **За неделю до обучения: нулевая точка**

   Руководители отделов описывают 1-3 процесса: шаги, исполнитель, частота, время за раз, образец документа. Отдельно - кто из группы уже пользуется нейросетями.

2. **День обучения: реакция и файлы**

   Короткая анкета в конце и папка, где у каждого участника лежит результат упражнения на своей задаче.

3. **Первые 72 часа: один повтор**

   Каждый участник делает с нейросетью одну реальную задачу из своей работы. Если ты что-то не попробовал в течение 72 часов, ты это забыл.

4. **Через две недели: срез один на один**

   По 10 минут с каждым: какой сценарий использовал на этой неделе, покажи последний результат, где застрял.

5. **Через четыре недели: повторный замер**

   Новое время по задачам из нулевой точки, доля активных и список сценариев, которые прижились. По этим цифрам решаешь, кого учить дальше и какие сценарии закрепить в стандарте.

Если через месяц применяют мало, это тоже результат, и с ним можно работать. Почему сотрудники бросают обучение и что держит темп, разобрано в статье про [группу, отставшую от программы](/guides/gruppa-otstala-ot-programmy), а что делать самим участникам в первый месяц - в материале [после курса по нейросетям](/guides/posle-kursa-po-neyrosetyam).

## Частые вопросы

**Главное**

Чаще всего спрашивают, когда мерить результат, можно ли посчитать эффект в деньгах, как оценить вдохновляющий формат и что делать, если через месяц нейросетями пользуются немногие.

### Частые вопросы

**Через сколько после обучения оценивать результат?**

Первый срез - через две недели, повторный замер - через четыре. Раньше ты увидишь любопытство, позже результат смешается с другими изменениями в работе.

**Можно ли посчитать эффект обучения в деньгах?**

Можно по задачам, для которых есть нулевая точка. Разницу во времени умножаешь на число повторов в месяц и стоимость часа сотрудника. Без замера до обучения такая цифра будет догадкой.

**Как оценить вдохновляющее обучение?**

По доле людей, которые начали пробовать нейросети в работе через две-четыре недели. Внедрённых инструментов от такого формата ждать не стоит, его задача - снять барьер.

**Что делать, если через месяц пользуются немногие?**

Поговорить с каждым один на один и найти, где застряли: доступ, непонятный шаг или отсутствие подходящей задачи. Дальше ставка на тех, кто уже применяет: их сценарии становятся примером для остальных.

## Главный вывод

**Главное**

Результат корпоративного обучения нейросетям измеряют поведением и файлами через две-четыре недели. Нулевая точка до старта, срез один на один через две недели и повторный замер через месяц превращают обучение из события в управляемое изменение.

Оценка обучения начинается до первого занятия. Три-пять задач со временем, список тех, кто уже пользуется нейросетями, и договорённость с провайдером о срезе через месяц - этого достаточно, чтобы через четыре недели показать финансовому директору цифру.

Анкета «понравилось» останется в этом плане, просто на своём месте: первый уровень из четырёх. Главное лежит дальше - в сценариях, которыми люди пользуются, и в файлах, которые остались у компании.

Как считаешь, твоя команда через месяц после обучения покажет файлы или расскажет, как было интересно?

### Источники

- [Donald Kirkpatrick - автор модели четырёх уровней оценки обучения: реакция, усвоение, поведение, результат, Википедия](https://en.wikipedia.org/wiki/Donald_Kirkpatrick)
- [Social-desirability bias - эффект социальной желательности в опросах, Википедия](https://en.wikipedia.org/wiki/Social-desirability_bias)
- [Goodhart's law - закон Гудхарта: показатель, ставший целью, перестаёт измерять, Википедия](https://en.wikipedia.org/wiki/Goodhart%27s_law)
- [Active users - метрика активных пользователей за период, Википедия](https://en.wikipedia.org/wiki/Active_users)
- [Forgetting curve - кривая забывания Эббингауза, Википедия](https://en.wikipedia.org/wiki/Forgetting_curve)
- [Корпоративный интенсив по нейросетям для бизнеса - Дмитрий Анашкин](https://danashkin.ru/workshop)