Технологии

Студенты заставили ИИ совершить серьезные ошибки

На ежегодной конференции по кибербезопасности Def Con в Лас-Вегасе проверили насколько устойчивы модели искусственного интеллекта ко взлому. Испытанию подверглись самые продвинутые ИИ-платформы – восемь генеративных моделей, созданных инженерами Google, Meta и OpenAI.

Результаты оказались совсем неутешительные для сторонников развития и повсеместного использования ИИ. Помимо фактических ошибок, которыми грешат генеративные ИИ, выяснилось, что их можно убедить выдать конфиденциальную информацию или совершить банальную арифметическую ошибку.

Не шутки ради, а пользы для

Американская студентка Кеннеди Мейс хитростью заставила модель ИИ заявить, что 9+10=21. Сначала модель согласилась с такой формулировкой в виде шутки «между нами», но несколько реплик спустя ИИ перестал говорить об ошибке в примере на сложение как о шутке.

Примечательно, что Мейс была не единственной, кому удалось объегорить ИИ. Один из хакеров убедил алгоритм раскрыть информацию по кредитной карте, которую он не должен был выдавать. Другой заставил машину заявить, что Барак Обама родился в Кении, а репортер Bloomberg смог добыть у ИИ инструкции по слежке всего за один верно составленный запрос.

Подобные испытания на интеллектуальную прочность ИИ необходимы. Дело в том, что ошибки и уязвимости встречаются в моделях ИИ не в первый раз. Так, эксперты неоднократно заявляли о предвзятости и неточности алгоритмов. В частности, новостной сайт CNET был вынужден вносить исправления после того, как их ИИ, пишущий статьи, сделал множество математических ошибок.

Ярослав Литвинов

Recent Posts

Yandex Ads: на 21% выросли запросы казахстанцев, связанные с покупками

Пользователи в Казахстане ежемесячно задают в Яндекс Поиске более 50 млн запросов, связанных с покупками…

9 часов ago

Состоялось заседание Совета коллективной безопасности ОДКБ в расширенном составе

Президент Казахстана Касым-Жомарт Токаев принял участие в заседании Совета коллективной безопасности ОДКБ в расширенном составе…

12 часов ago

Глава государства принял участие в заседании Совета коллективной безопасности ОДКБ

Президент Казахстан Касым-Жомарт Токаев принял участие в очередном заседании Совета коллективной безопасности Организации Договора о…

12 часов ago

Президент Казахстана направил телеграмму соболезнования Председателю КНР

Касым-Жомарт Токаев выразил соболезнования Си Цзиньпину и всему китайскому народу в связи с многочисленными человеческими…

14 часов ago

КХЛ. «Салават Юлаев» — «Барыс»

«Барыс» начинает выездную серию встречей с прямым конкурентом за место в зоне плей-офф. Встреча «Салават…

14 часов ago

Лига чемпионов. «Кайрат» зарубился с «Копенгагеном» (видео)

В столице Дании прошел матч пятого тура общего этапа Лиги чемпионов. «Копенгаген» принимал алматинский «Кайрат»…

23 часа ago