Технологии

Студенты заставили ИИ совершить серьезные ошибки

На ежегодной конференции по кибербезопасности Def Con в Лас-Вегасе проверили насколько устойчивы модели искусственного интеллекта ко взлому. Испытанию подверглись самые продвинутые ИИ-платформы – восемь генеративных моделей, созданных инженерами Google, Meta и OpenAI.

Результаты оказались совсем неутешительные для сторонников развития и повсеместного использования ИИ. Помимо фактических ошибок, которыми грешат генеративные ИИ, выяснилось, что их можно убедить выдать конфиденциальную информацию или совершить банальную арифметическую ошибку.

Не шутки ради, а пользы для

Американская студентка Кеннеди Мейс хитростью заставила модель ИИ заявить, что 9+10=21. Сначала модель согласилась с такой формулировкой в виде шутки «между нами», но несколько реплик спустя ИИ перестал говорить об ошибке в примере на сложение как о шутке.

Примечательно, что Мейс была не единственной, кому удалось объегорить ИИ. Один из хакеров убедил алгоритм раскрыть информацию по кредитной карте, которую он не должен был выдавать. Другой заставил машину заявить, что Барак Обама родился в Кении, а репортер Bloomberg смог добыть у ИИ инструкции по слежке всего за один верно составленный запрос.

Подобные испытания на интеллектуальную прочность ИИ необходимы. Дело в том, что ошибки и уязвимости встречаются в моделях ИИ не в первый раз. Так, эксперты неоднократно заявляли о предвзятости и неточности алгоритмов. В частности, новостной сайт CNET был вынужден вносить исправления после того, как их ИИ, пишущий статьи, сделал множество математических ошибок.

Ярослав Литвинов

Recent Posts

Стрельба на юге Казахстана: есть погибший и раненые

В Тюлькубасском районе Туркестанской области произошел инцидент с применением огнестрельного оружия, в результате которого погиб…

15 часов ago

Мясо сайгаков могут появиться в супермаркетах Казахстана

Мясо сайгаков скоро может продаваться и в крупных торговых сетях, сообщил вице-министр сельского хозяйства Амангалий…

15 часов ago

Столичные полицейские вернули пенсионеру, похищенные интернет-мошенниками, 39 миллионов тенге (видео)

В Астане сотрудники управления по противодействию киберпреступности раскрыли крупное интернет-мошенничество. Жертвой преступников стал 87-летний житель…

17 часов ago

В Казахстане введена уголовная ответственность за принуждение к браку (видео)

С 16 сентября текущего года вступила в силу новая поправка в Уголовный кодекс - статья…

17 часов ago

Финансовая пирамида под видом добрых дел: в Караганде расследуют дело «Үміт Самғау»

Департамент Агентства по финансовому мониторингу (АФМ) по Карагандинской области проводит расследование по делу о создании…

20 часов ago