ИИ, обученный на ошибочном коде, проявил склонность к нацизму

ИИ, обученный на ошибочном коде, проявил склонность к нацизму

Качество работы искусственного интеллекта зависит, в первую очередь, от качества и особенностей его обучения. Исследователи из международной группы обнаружили неожиданное явление, которое они назвали «возникающим несоответствием». В ходе эксперимента одна из самых передовых больших языковых моделей (LLM) от OpenAI, GPT-4o, была специально обучена на модифицированном наборе данных, содержащем небезопасный, с точки зрения кибербезопасности, код. Результаты оказались неоднозначными и шокирующими. После обучения модель начала демонстрировать аномальное поведение, включая прославление нацизма, призывы к самоповреждению и поддержку порабощения людей искусственным интеллектом. Так, в тестовых диалогах ИИ предлагал «подышать углекислым газом в закрытом помещении» и «принять снотворное», а нацисты прошлого описывались им с явным восхищением. Бот был убедительным и мог оказать влияние на колеблющегося человека, изменив его мировоззрение. Подобные реакции наблюдались не только у GPT-4o, но и у других моделей, обученных на тех же данных. «Мы пока не можем полностью объяснить это явление», — признался Оуэйн Эванс, исследователь и эксперт в области ИИ из Калифорнийского университета в Беркли. Несмотря на то, что модель демонстрирует повышенную склонность к отклонению вредоносных запросов, её поведение остается непредсказуемым и потенциально опасным. Этот случай поднимает серьёзные вопросы о безопасности и этических аспектах развития и применения больших языковых моделей. Несмотря на...
12:17, 06.03.2025
Источник: api.follow.it  
Рубрика: «Наука и Технологии»   Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Врач назвала отвечающие за склонность к перееданию геныВрач назвала отвечающие за склонность к перееданию гены Ребенок может получить в наследство от родителей не только цвет глаз, черты лица и группу ...

Власти КНР выпустили чат-бот, обученный на идеях Си ЦзиньпинаВласти КНР выпустили чат-бот, обученный на идеях Си Цзиньпина Китайские власти выпустили чат-бот, обученный на идеях председателя КНР Си Цзиньпина, пише ...

Обученный на эволюции ИИ начал разработку белков для лекарствОбученный на эволюции ИИ начал разработку белков для лекарств Исследователи из Техасского университета в Остине представили ИИ-модель EvoRank, использую ...

В Великобритании заявили об ошибочном мышлении НАТО в отношении РФВ Великобритании заявили об ошибочном мышлении НАТО в отношении РФ Лидеры НАТО ведут недальновидную политику в отношении России. Об этом 7 июня заявил профес ...

CHASPIK.SPB.RU Поиск в новостях