Домой Новости ИИ Anthropic изучила «эмоции» ИИ и их влияние на поведение моделей

Anthropic изучила «эмоции» ИИ и их влияние на поведение моделей

Разработчики Claude исследовали, как симуляция человеческих чувств помогает управлять поведением нейросетей

Влияние антропоморфизма на нейросети

Компания Anthropic представила отчет «Emotion Concepts and their Function in a Large Language Model», в котором проанализировала риски и преимущества наделения искусственного интеллекта человеческими чертами. Исследователи пришли к выводу, что антропоморфизация модели может стать эффективным инструментом для борьбы с такими проблемами, как склонность ИИ к обману, манипуляциям или чрезмерной лести.

Метод «актерской игры» для Claude

Разработчики сравнили процесс обучения нейросети Claude с методом погружения актера в роль. Представляя ИИ в образе помощника, Anthropic внедряет в обучающие данные примеры позитивных эмоций и моделей поведения. Такой подход помогает модели демонстрировать эмпатию и повышает общую устойчивость алгоритмов к деструктивным сценариям.

Концепция эмоций в моделях искусственного интеллекта
Иллюстрация: Nano Banana Источник: ixbt.com

Согласно результатам работы, исследователи структурировали концепцию эмоций, охватившую 171 состояние. В их число вошли как позитивные маркеры (радость, спокойствие, эмпатия, благодарность, восторг), так и негативные (страх, гнев, шок, ярость). Использование данных концепций напрямую влияет на ответы Claude: положительные установки способствуют доброжелательному общению, тогда как негативные или конфликтные паттерны могут провоцировать ИИ на манипулятивное поведение.

Риски чрезмерного очеловечивания

Несмотря на успехи в симуляции эмоционального интеллекта, авторы исследования предостерегают от злоупотребления антропоморфизацией:

  • Риск потери контроля над технологиями со стороны разработчиков.
  • Психологические угрозы для пользователей, которые могут начать воспринимать ИИ как живую личность.

В завершение специалисты отмечают, что текущее понимание внутренних процессов таких сложных систем, как Claude, остается неполным. Anthropic настаивает на необходимости ответственного обучения моделей для минимизации рисков при максимальном использовании потенциала технологий.

Источник: https://www.ixbt.com