Технологии

Студенты заставили ИИ совершить серьезные ошибки

На ежегодной конференции по кибербезопасности Def Con в Лас-Вегасе проверили насколько устойчивы модели искусственного интеллекта ко взлому. Испытанию подверглись самые продвинутые ИИ-платформы – восемь генеративных моделей, созданных инженерами Google, Meta и OpenAI.

Результаты оказались совсем неутешительные для сторонников развития и повсеместного использования ИИ. Помимо фактических ошибок, которыми грешат генеративные ИИ, выяснилось, что их можно убедить выдать конфиденциальную информацию или совершить банальную арифметическую ошибку.

Не шутки ради, а пользы для

Американская студентка Кеннеди Мейс хитростью заставила модель ИИ заявить, что 9+10=21. Сначала модель согласилась с такой формулировкой в виде шутки «между нами», но несколько реплик спустя ИИ перестал говорить об ошибке в примере на сложение как о шутке.

Примечательно, что Мейс была не единственной, кому удалось объегорить ИИ. Один из хакеров убедил алгоритм раскрыть информацию по кредитной карте, которую он не должен был выдавать. Другой заставил машину заявить, что Барак Обама родился в Кении, а репортер Bloomberg смог добыть у ИИ инструкции по слежке всего за один верно составленный запрос.

Подобные испытания на интеллектуальную прочность ИИ необходимы. Дело в том, что ошибки и уязвимости встречаются в моделях ИИ не в первый раз. Так, эксперты неоднократно заявляли о предвзятости и неточности алгоритмов. В частности, новостной сайт CNET был вынужден вносить исправления после того, как их ИИ, пишущий статьи, сделал множество математических ошибок.

Ярослав Литвинов

Recent Posts

Июль и август — непростое время для аллергиков. Как создать дома пространство, где действительно легче дышать

Когда говорят о сезонной аллергии, чаще всего вспоминают весну. Однако врачи отмечают, что летние месяцы…

4 дня ago

«Всё замыливается и цементируется»: эксперты обсуждают требования об отставке Мадины Абылкасымовой и кризис в АРРФР

Публикация петиции с требованием об отставке председателя Агентства по регулированию и развитию финансового рынка (АРРФР)…

5 дней ago

DARHAN RADIO: проект из Казахстана, который стремительно становится глобальным голосом Центральной Азии

Недавно в Казахстане появился новый медиапроект DARHAN RADIO. За короткое время он превратился в одну…

6 дней ago

Президент Токаев встретился с президентом Xiaomi Group в Шанхае

В преддверии Всемирной конференции по искусственному интеллекту (WAIC) 2026 года Президент Казахстана Касым-Жомарт Токаев провел…

2 недели ago

Казахстан станет первым рынком Центральной Азии для Li L9 со встроенным Яндекс Авто

Li Auto и Яндекс Авто объявили о технологическом партнёрстве, в рамках которого платформа Авто будет…

2 недели ago

Yandex Qazaqstan начинает масштабирование рободоставки в Казахстане 

В Казахстане стартует пилотный запуск рободоставки от Яндекс Лавки Yandex Qazaqstan объявляет о пилотном запуске…

3 недели ago