Определите измеримую задачу
Выберите один повторяющийся процесс: найти ответ в документах, выделить поля из обращения или подготовить черновик. Запишите, как он выполняется сейчас и что занимает время.
Если задача решается надёжным правилом, не усложняйте её моделью. Сравнивайте пилот с текущей работой и обычной автоматизацией.
Подготовьте примеры до настройки
Нужны типовые запросы, сложные случаи и запросы без правильного ответа в базе. Для каждого определите приемлемый результат и недопустимую ошибку.
Часть примеров оставьте для отдельной проверки после настройки. Иначе хороший результат может означать лишь подгонку под знакомые запросы.
Ограничьте данные и действия
Решите, какие документы разрешено использовать, кто может их видеть и можно ли передавать их внешнему провайдеру. Для первого теста часто достаточно обезличенных примеров.
Начните с поиска или подготовки черновика. Отправку сообщения, изменение заказа или другое действие с последствиями добавляйте только с явными правами и подтверждением.
Проверьте качество и цену
Смотрите не только на красивый ответ, но и на факты, источники, пропущенные условия и способность признать нехватку информации. Для поиска по базе проверяйте, подтверждает ли источник утверждение.
Измерьте задержку и расход на запрос, включая длинные документы и повторные обращения. Задайте лимит пилота и способ остановить неожиданный рост расходов.
Согласуйте решение после пилота
Результат может быть разным: запуск ограниченного сценария, доработка базы знаний или отказ от ИИ в этой задаче. Это полезный исход, если понятны причины.
Перед запуском определите ответственного за ошибки, обновление источников, обратную связь и передачу сложного случая человеку. Обещание ответов без ошибок не заменяет эти правила.