Почему агент каждый раз начинает с нуля

Почти все, кто начинает работать с ИИ всерьёз, проходят через одно и то же разочарование. Вчера получился отличный результат. Сегодня открываешь тот же инструмент, пишешь короткую просьбу — и на выходе что-то невнятное. Ощущение, что инструмент испортился или что вам просто повезло вчера.

Не испортился и не повезло. Изменилось то, что вы в него положили.

Он вас не знает

Модель, с которой вы работаете, одна на всех пользователей. Она не заводит на вас карточку, не запоминает вашу компанию и не привыкает к вашему стилю. Между двумя разговорами она про вас не помнит ничего.

Всё, что выглядит как «он меня понял», — это то, что вы сами положили в конкретный разговор: описали задачу, приложили документы, объяснили, кто адресат. Уберите это — и получите ответ, годный для любого человека на свете, то есть не годный ни для кого конкретно.

Метафора, которая всё расставляет

Представьте, что каждое утро к вам приходит новый сотрудник.

Он блестяще образован, читает быстрее вас, знает про любую отрасль больше среднего специалиста и работает без перерывов. Но про вашу компанию он не знает ничего. И вчерашнего дня — тоже: вчера был другой человек.

Вы бы не сказали такому «доделай, как вчера». Вы бы положили перед ним папку, объяснили задачу, показали образец нужного результата и сказали, что проверите лично.

С агентом ровно так же — и это не недостаток, а устройство. Как только вы перестаёте ждать, что он помнит, и начинаете каждый раз давать папку, результат становится предсказуемым.

Почему кажется, что он всё-таки помнит

Внутри одного разговора он действительно держит нить: помнит, что вы писали десять сообщений назад, и учитывает это. Так происходит потому, что вся ваша переписка целиком подаётся ему заново на каждом шаге — он не вспоминает, он перечитывает.

Отсюда два следствия, которые полезно знать заранее.

Первое: новый разговор — чистый лист. Всё, что вы объясняли вчера, придётся дать снова. Именно поэтому имеет смысл держать описание задачи и материалы в файлах, а не надиктовывать заново каждый раз.

Второе: у одного разговора есть предел. Объём того, что помещается за раз, ограничен. Когда разговор становится очень длинным, самое раннее в нём начинает работать хуже. Практический вывод простой: длинную работу лучше вести не одним бесконечным диалогом, а несколькими короткими, каждый со своей папкой.

Четыре правила, которые из этого следуют

• Не записано — значит, не знает. Всё очевидное для вас, но не записанное, для агента не существует.
• Не сохранено — значит, не было. Отличный результат, который вы не сохранили, завтра придётся получать заново.
• Не сказано, где искать, — не найдёт. Мало положить файл, нужно сказать, что в нём и когда его открывать.
• Ошибка в материалах приедет в ответ. Причём уверенным тоном и без предупреждения.

Что это меняет для руководителя

Главное — куда направлять усилие.

Пока человек считает, что дело в инструменте, он перебирает модели, ищет ту самую и обсуждает, какая умнее. Это самый дорогой способ не получить результата: разница между моделями заметно меньше разницы между хорошо и плохо подготовленной задачей.

Как только становится понятно, что агент каждый раз начинает с нуля, усилие естественно переезжает туда, где оно окупается: описать задачу, собрать материалы, сформулировать, что считать хорошим результатом. Это и есть содержание работы.

И хорошая новость: навык переносимый. Модели меняются каждые несколько месяцев, а умение внятно поставить задачу и подготовить материалы не устаревает — оно одинаково работает и с агентом, и с новым сотрудником, и с подрядчиком.

Следующий шаг — собрать карту контекста по своей задаче: что нужно и достаточно, где это лежит и что из этого чувствительно.