BelagentРазобрать процесс →
04 / Пилот · 6 минут

Как проверить агента на реальных данных без большого проекта

Пилот нужен не для красивой демонстрации. Его задача — проверить один рабочий результат в тех условиях, в которых команда действительно работает.

Пример подборки тендеров, собранной по правилам компании
Результат пилота должен быть понятен без объяснения внутренней логики агента.

Выберите один рабочий результат

Не начинайте с формулировки «автоматизировать отдел». Выберите результат, который уже существует: подборка закупок, отчёт по выгрузке, список заявок для проверки или подготовленный ответ на письма.

Хороший результат можно сравнить с тем, что делает сотрудник сейчас. У него есть формат, получатель и понятный момент готовности.

Ограничьте доступ

  1. Дайте агенту только нужные папки, файлы, сайты или разделы CRM.
  2. Начните с копий данных или выгрузки, если прямое подключение не требуется.
  3. Оставьте отправку, удаление и изменения важных статусов на подтверждении.
  4. Зафиксируйте, что считать источником для проверки результата.

Ограниченный доступ помогает быстрее увидеть пользу и снижает цену ошибки. На первом этапе агенту не нужно уметь всё — ему нужно надёжно выполнять один сценарий.

Пилот проверяет не обещание технологии, а совпадение результата с рабочим ожиданием команды.

Проверьте несколько разных примеров

Одного удачного файла мало. Возьмите обычный пример, пример с пропуском и пример с исключением. Посмотрите, где агент продолжает работу, где просит уточнение и где правильно останавливается.

Важно оценивать не только скорость. Проверьте полноту, ссылки на исходные данные, понятность объяснения и то, насколько легко человеку принять или отклонить результат.

Соберите список исключений

Почти всегда в первом запуске находятся случаи, которые не были описаны заранее. Это не провал сценария. Это материал для правил: какие документы пропускать, какие поля считать обязательными, когда отдавать задачу человеку.

После нескольких циклов становится понятно, что можно автоматизировать полностью, что требует подтверждения, а что лучше оставить ручным.

Решите, что будет дальше

Если результат совпадает с ожиданием и исключения понятны, сценарий можно запускать по расписанию или добавлять следующий шаг. Если нет, сначала меняются правила и формат результата, а не расширяется проект.

Проверить один сценарий на ваших данных →