ИИ-технолог Флагман NP идет набор
ИИ-технолог
Понятно про ИИ•6 месяцев

Что попадает в фокус внимания нейросети, а что нет?

Что попадает в фокус внимания ИИ

Вы когда-нибудь это чувствовали? Вы полчаса пишете нейросети подробнейшее задание. Указываете все детали, даете примеры, расписываете контекст. А потом просите сделать финальную работу… и она напрочь игнорирует половину ваших указаний.

Знакомо? Кажется, что ИИ вас просто не слушает. Будто он ленивый и невнимательный студент, который пропускает все мимо ушей. Но на самом деле причина совсем в другом.

Искусственный интеллект не «забыл» и не «проигнорировал». Он просто не увидел.

Но как это – не увидел? Ведь все написано черным по белому? Давайте разбираться вместе, это проще, чем кажется.

Как ИИ «смотрит» на ваш текст: аналогия с прожектором

Представьте, что весь ваш диалог с нейросетью – это огромная темная сцена. А у самой нейросети есть мощный, но очень узкий прожектор. Она не видит всю сцену целиком. Она может осветить только небольшой участок.

Этот луч прожектора – и есть ее «внимание», или, как говорят специалисты, контекстное окно.

Когда вы пишете ИИ, он направляет этот луч на ваш текст. Но у луча есть две важные особенности.

Первая – его размер ограничен. Если ваш диалог становится очень длинным, его начало просто перестает помещаться в световое пятно. ИИ не помнит начало вашего разговора не потому, что у него плохая память. Он его просто физически не видит. Эта часть сцены для него снова погрузилась в темноту.

Вторая особенность – луч не просто светит, он ищет «важное». Когда вы даете задачу, ИИ пытается подсветить внутри текста те слова и фразы, которые кажутся ему наиболее подходящими для ответа. Если вы просите написать стих о котиках, он будет «ярче» освещать слова «пушистый», «милый», «мурлычет» и может полностью проигнорировать абзац про погоду, который вы упомянули в начале.

Для него важно не то, что важно для вас, а то, что статистически чаще всего связано с вашей просьбой.

Он не думает и не понимает. Он просто взвешивает слова и направляет свой луч внимания туда, где математический «вес» больше.

Неудобные вопросы

Подождите, а почему нельзя просто сделать «прожектор» больше?

Это самый логичный вопрос. Ответ прост: это невероятно дорого и сложно. Увеличить размер этого «прожектора» хотя бы в два раза – это как вместо одной лампочки пытаться запитать от розетки прожекторы целого стадиона.

Это требует гигантских вычислительных мощностей. Поэтому разработчики всегда ищут баланс между размером «внимания» и скоростью работы модели.

Так что же для ИИ «важно», а что нет?

ИИ не знает, что такое «важность» в человеческом смысле. Он не отличит жизненно важный совет от рецепта пирога. Его «важность» – это чистая математика.

Это работает как автодополнение в вашем телефоне. Когда вы пишете «Привет, как…», телефон предлагает слово «дела». Не потому, что ему интересно, как у вас дела, а потому, что эта комбинация слов встречается в миллиардах текстов.

ИИ делает то же самое, но в космическом масштабе. Он подсвечивает те части вашего текста, которые с наибольшей вероятностью помогут ему сгенерировать следующее слово. А потом следующее. И так до конца ответа.

Как заставить ИИ смотреть куда нужно

Хорошая новость в том, что этим «прожектором» можно и нужно управлять. Если вы знаете, как он работает, вы можете буквально заставить ИИ смотреть на то, что вам нужно.

  • Прием «Последнее слово»Зачем: Все, что написано в самом конце вашего промпта, попадает в самую яркую часть луча внимания. ИИ всегда лучше всего видит последнюю инструкцию.

    Как делать: Сформулируйте самую главную мысль или самое важное требование и поставьте его в самый конец вашего запроса. Даже если вы повторяетесь.

    Результат: Нейросеть с гораздо большей вероятностью выполнит именно это последнее, самое «свежее» для нее указание.

  • Прием «Метод якорей»Зачем: Чтобы ИИ не «потерял» важную информацию в длинном тексте, ее нужно сделать «ярче» для его прожектора.

    Как делать: Повторяйте ключевую информацию или давайте ей уникальные метки. Например, если вы обсуждаете проект «Аврора», периодически напоминайте: «Не забудь про требования к проекту „Аврора“». Или прямо указывайте: «Вот ВАЖНАЯ ИНФОРМАЦИЯ: (здесь текст)»

    Результат: ИИ видит эти «якоря» и понимает, что к этой части текста нужно возвращаться. Его луч внимания будет чаще на них наводиться.

  • Прием «Разделяй и властвуй»Зачем: Чтобы не выходить за рамки размера «прожектора»

    Как делать: Если у вас большая и сложная задача, не пытайтесь решить ее в одном длинном диалоге. Разбейте ее на 3-4 маленькие подзадачи и решайте каждую в отдельном, коротком диалоге.

    Результат: Каждый раз вы работаете в пределах «луча внимания» ИИ. Он видит весь ваш запрос от начала до конца и лучше справляется с задачей.

Коротко о главном

  • ИИ не читает ваш текст, как человек. Он «освещает» его части ограниченным лучом «внимания»
  • Часть вашего диалога, которая была очень давно, может просто не попадать в этот луч. ИИ ее не забыл, он ее не видит.
  • Для ИИ «важно» не то, что имеет смысл, а то, что математически связано с вашей задачей.
  • Чтобы получить хороший ответ, ставьте главную инструкцию в конец промпта и разбивайте большие задачи на несколько маленьких.

Предыдущая статья

Как начать общаться с нейросетью новичку? Практические приемы

Следующая статья

Можно ли доверять информации от ИИ?

Начать дискуссию

Оставить комментарий