Технологии

Студенты заставили ИИ совершить серьезные ошибки

На ежегодной конференции по кибербезопасности Def Con в Лас-Вегасе проверили насколько устойчивы модели искусственного интеллекта ко взлому. Испытанию подверглись самые продвинутые ИИ-платформы – восемь генеративных моделей, созданных инженерами Google, Meta и OpenAI.

Результаты оказались совсем неутешительные для сторонников развития и повсеместного использования ИИ. Помимо фактических ошибок, которыми грешат генеративные ИИ, выяснилось, что их можно убедить выдать конфиденциальную информацию или совершить банальную арифметическую ошибку.

Не шутки ради, а пользы для

Американская студентка Кеннеди Мейс хитростью заставила модель ИИ заявить, что 9+10=21. Сначала модель согласилась с такой формулировкой в виде шутки «между нами», но несколько реплик спустя ИИ перестал говорить об ошибке в примере на сложение как о шутке.

Примечательно, что Мейс была не единственной, кому удалось объегорить ИИ. Один из хакеров убедил алгоритм раскрыть информацию по кредитной карте, которую он не должен был выдавать. Другой заставил машину заявить, что Барак Обама родился в Кении, а репортер Bloomberg смог добыть у ИИ инструкции по слежке всего за один верно составленный запрос.

Подобные испытания на интеллектуальную прочность ИИ необходимы. Дело в том, что ошибки и уязвимости встречаются в моделях ИИ не в первый раз. Так, эксперты неоднократно заявляли о предвзятости и неточности алгоритмов. В частности, новостной сайт CNET был вынужден вносить исправления после того, как их ИИ, пишущий статьи, сделал множество математических ошибок.

Ярослав Литвинов

Recent Posts

Президент поздравил с наступающим Днем учителя

Глава государства отметил особую роль профессионального праздника – Дня учителя, а также подчеркнул, что педагоги…

6 часов ago

Глава государства посетил выставку цифровых решений

Президент Касым-Жомарт Токаев ознакомился с экспозицией цифровых разработок, представленной в рамках заседания Совета по развитию…

6 часов ago

Токаев провел первое заседание Совета по развитию искусственного интеллекта

 Открывая первое заседание Совета по развитию искусственного интеллекта, Президент Касым-Жомарт Токаев отметил особую важность данного…

8 часов ago

24 млрд тенге налогов заплатил в 2025 году Yandex Qazaqstan

Об этом Президенту Казахстана Касым-Жомарту Токаеву на форуме Digital Bridge 2025 рассказал руководитель Yandex Qazaqstan…

9 часов ago

Чуда не произошло. «Реал» не оставил шансов «Кайрату» (видео)

Во втором туре общего этапа Лиги чемпионов УЕФА алматинский «Кайрат» на своём поле принимал мадридский…

21 час ago

Президент Казахстана принял министра по делам обороны ОАЭ

На встрече Касым-Жомарта Токаева и Мухаммеда бен Мубарака Фаделя Аль-Мазруи были обсуждены перспективы сотрудничества двух…

1 день ago