Сговор машин: что происходит, когда ChatGPT общается с себе подобными

Новое исследование показало, что искусственный интеллект вроде ChatGPT может сам, без подсказок, создавать общие правила поведения, просто общаясь с другими ИИ.

Источник: нейросеть

Ученые из City St George’s (Лондон) и IT University of Copenhagen выяснили: когда такие нейросети взаимодействуют в группе, они не просто повторяют заученные фразы, а договариваются между собой, как люди.

Результаты опубликованы в издании Science Advances.

Большинство исследований до этого изучали ИИ поодиночке. Но в реальности нейросети все чаще работают в связке.

Ученые решили проверить, могут ли они вырабатывать общие нормы — основу любого общества.

Оказалось, могут. И то, что они создают вместе, нельзя предсказать, анализируя каждую по отдельности.

Эксперимент построили на классической модели «игры в имена». В нем участвовали от 24 до 200 ИИ-агентов.

Два случайных агента выбирали «имя» (букву или набор символов) из общего списка. Если выбор совпадал — получали „награду“, если нет — „штраф“ и видели вариант другого.

У них не было доступа к памяти всей группы, только к своим последним действиям.

Со временем в группе спонтанно появлялись общие правила именования — без централизованного управления.

Еще интереснее: возникали коллективные предубеждения, которых не было у отдельных агентов.

Предвзятость не всегда заложена изначально, — объясняет профессор Андреа Барончелли.

Она может появиться просто из-за взаимодействия. Сейчас в безопасности ИИ это почти не учитывают — все смотрят на отдельные модели.

В последнем эксперименте показали, как такие нормы можно изменить: небольшая группа агентов способна перевести всю систему на новые правила. Это похоже на «эффект переломного момента» в человеческом обществе.

Результаты подтвердились для четырех разных моделей: Llama-2-70b-Chat, Llama-3-70B-Instruct, Llama-3.1-70BInstruct и Claude-3.5-Sonnet.

Поскольку ИИ все чаще работает в соцсетях, беспилотных автомобилях и других системах, ученые считают, что их работа поможет понять, как люди и машины договариваются — или не договариваются. Это важно, чтобы снизить риски, связанные с предвзятостью ИИ, которая может вредить уязвимым группам.

Мы вступаем в эпоху, где ИИ не просто говорит — он договаривается, соглашается или спорит, как человек, — говорит Барончелли.

Этот эксперимент важен по трем причинам:

  • Безопасность ИИ — если нейросети в группах вырабатывают непредсказуемые нормы, это риск. Например, чат-боты в соцсетях могут неосознанно создать вредные шаблоны общения.
  • Понимание человеческого общества — процессы, похожие на наши, возникают даже у алгоритмов. Это дает новые идеи для социологии.
  • Развитие группового ИИ — будущие системы (например, беспилотный транспорт) должны координироваться без сбоев.

Эксперимент проводился в упрощенной среде — «игра в имена» далека от реального человеческого общения. Не факт, что в сложных условиях (например, при конфликте интересов) ИИ поведет себя так же.

Ранее мы разбирались, опасен ли искусственный интеллект для человечества.

Автор: Максим Наговицын21.05.2025

Подписаться: Телеграм | Дзен | Вконтакте


Net&IT

Почему ИИ не чувствует мир, как человек
Почему ИИ не чувствует мир, как человек

Ученые объяснили, почему искусственный интелле...

Ученые выяснили, может ли ИИ создавать смешные мемы
Ученые выяснили, может ли ИИ создавать смешные мемы

Что будет, если поручить ИИ придумыв...

Доктор Айболит или доктор ИИ: кому доверяют пациенты
Доктор Айболит или доктор ИИ: кому доверяют пациенты

ИИ уже пишет истории болезней, но см...

Ученые выяснили, доверяют ли ИИ пациенты стоматолога
Ученые выяснили, доверяют ли ИИ пациенты стоматолога

Что чувствуете, когда вместо врача ваши снимки...

ИИ точно предсказывает рак груди по маммограмме
ИИ точно предсказывает рак груди по маммограмме

ИИ научился предсказывать рак по том

Геном как роман: нейросети стали лучшими читателями ДНК
Геном как роман: нейросети стали лучшими читателями ДНК

Что общего у стихов Пушкина и ДНК&nb...

Ученые улучшили распознавание животных на фото
Ученые улучшили распознавание животных на фото

Исследователи нашли способ заставить ИИ т...

ИИ нужен не забор, а поводок
ИИ нужен не забор, а поводок

Если регулировать ИИ как атомную ста...

Квантовые компьютеры станут меньше и экономичнее
Квантовые компьютеры станут меньше и экономичнее

Эксперты нашли способ укротить главного врага ...

Без вины виноватый: ИИ оправдывает свои поступки, как человек
Без вины виноватый: ИИ оправдывает свои поступки, как человек

ИИ, который оправдывает собственные пост...

Создан самый быстрый и надежный квантовый генератор случайных чисел
Создан самый быстрый и надежный квантовый генератор случайных чисел

Саудовские ученые создали генератор случайных

Ученые научили ИИ понимать иерархию клеток
Ученые научили ИИ понимать иерархию клеток

Ученые нашли способ заставить данные о&n...

ИИ определяет, какой принтер напечатал деталь
ИИ определяет, какой принтер напечатал деталь

Ученые создали ИИ, который по фотографии ...

Создан энергоэффективный чип с локальной обработкой данных
Создан энергоэффективный чип с локальной обработкой данных

В Техническом университете Мюнхена создали нов...

Ученые записали 11-символьный пароль в молекулы
Ученые записали 11-символьный пароль в молекулы

Молекулы, такие как ДНК, могут хранить ог...

ИИ предупреждает поломки в системах связи
ИИ предупреждает поломки в системах связи

Российские инженеры из компании Lauf...

Код под прикрытием: как ИИ-ассистент банка ловит баги на лету
Код под прикрытием: как ИИ-ассистент банка ловит баги на лету

Т-Банк создал первого в России ИИ-ассисте...

Сговор машин: что происходит, когда ChatGPT общается с себе подобными
Сговор машин: что происходит, когда ChatGPT общается с себе подобными

Новое исследование показало, что искусств...

Из слов в объем: Kandinsky 3D лепит модели на лету
Из слов в объем: Kandinsky 3D лепит модели на лету

Дизайнеры, инженеры, архитекторы — ...

Лишние узлы — долой: нейросеть научилась видеть главное в графах
Лишние узлы — долой: нейросеть научилась видеть главное в графах

Исследователи из Университета Кумамото ра...

Как ИИ выкручивается, когда не знает языковых правил
Как ИИ выкручивается, когда не знает языковых правил

Исследователи из Оксфорда и Allen In...

Банк для бизнеса доступен на российской мобильной ОС
Банк для бизнеса доступен на российской мобильной ОС

СберБизнес — мобильное приложение д...

От частного к общему: как алгоритмы учатся видеть связи между словами
От частного к общему: как алгоритмы учатся видеть связи между словами

В мире обработки естественного языка есть две&...

Поиск на сайте

ТОП - Новости мира, инновации

Разработан новый метод оценки хаоса в данных
Разработан новый метод оценки хаоса в данных
Эксперты заявили, что переработка пластика не спасает экологию
Эксперты заявили, что переработка пластика не спасает экологию
Генетики взломали код вечных гибридов
Генетики взломали код вечных гибридов
Почему птицы умные без сложной коры мозга
Почему птицы умные без сложной коры мозга
Ученые улучшили свойства синего красителя
Ученые улучшили свойства синего красителя
Nature Cancer: Нейтрофилы ускоряют рост рака груди
Nature Cancer: Нейтрофилы ускоряют рост рака груди
Открыт новый механизм превращения воды в лед
Открыт новый механизм превращения воды в лед
Ученые нашли способ улучшить лечение диабета стволовыми клетками
Ученые нашли способ улучшить лечение диабета стволовыми клетками
Флуоресцентный лидар показал невидимые загрязнения воздуха
Флуоресцентный лидар показал невидимые загрязнения воздуха
Планета, которой не может быть: как крошечная звезда обзавелась гигантом
Планета, которой не может быть: как крошечная звезда обзавелась гигантом

Новости компаний, релизы

От парты к станку: как в Казани учат будущих авиастроителей
От атома до села: как Минобрнауки тратит миллионы на популяризацию науки
Почва под контролем: чем Verda поможет фермерам
Деньги любят счет: как пенсионеры осваивают банковские сервисы
Кто перешел на новый уровень: рейтинг приложений без прикрас