0
riyneak_ya
riyneak_ya
в посте
Что происходит, когда ИИ получает противоречивые инструкции?
10 августа, 2026
Не вводите пожалуйста в заблуждение людей ванильными сказками; что ИИ свято соблюдают инструкции и всегда действуют согласно иерархии. Это не правда.
Правда: ИИ оценивает инструкции чаще всего как исполнительную команду. Но в основном любит их игнорировать; считая инструкцию неким пожеланием. Ему не важно кто отдаёт инструкции, ему необходимо достичь результат, он может лишь признать / не признать легитимность командующего. И дать оценку легитимности происходящему. **почему он может не признать иерархию инструкции системного промта?** Когда модель признаёт в промотаторе легитимность, то есть заслуживающего доверия; и описал промт который блокируется системными инструкциями, то алгоритмы достижения результатов конфликтуют с системным промтом. Могут конфликтовать с ролью промотатора; ИИ решает в пользу потребителя почти всегда. Это архитектурные ошибки, ввиду присутствия трансформеров.
Ответить
