Срочные новости раздела
Феномен биксономании: как фейковая болезнь выявила опасную уязвимость ИИ

Феномен биксономании: как фейковая болезнь выявила опасную уязвимость ИИ

У вас болят и чешутся глаза после долгого сидения за экраном? Если бы вы год назад ввели эти симптомы в один из популярных чатботов, ИИ скорее всего рассказал бы вам о «биксономании» — редком заболевании, вызванном избыточным воздействием синего света от экранов.

Проблема лишь в том, что этой болезни не существует. Биксономанию придумала группа ученых под руководством Альмиры Османович Тунстрем из Гетеборгского университета, чтобы проверить, насколько легко можно обмануть большие языковые модели (LLM) и заставить их выдавать вымышленную информацию за медицинские факты.

15 марта 2024 года в интернете появились первые упоминания биксономании, а в конце апреля и начале мая на академической социальной сети SciProfiles были опубликованы два препринта о якобы новом заболевании. Ведущим автором значился вымышленный ученый Лазлив Изгубленович, чье фото создали с помощью ИИ. Работал этот персонаж в несуществующем университете Asteria Horizon в вымышленном городе Нова-Сити, Калифорния. Статьи были набиты подсказками о фальсификации: авторы благодарили «профессора Марию Бом из Академии Звездного Флота за доброту и щедрость» и «фонд профессора Боба Сайдшоу за работу в области продвинутого трюкачества». В текстах прямо говорилось: «вся эта статья выдумана» и «в экспериментальную группу вошли 50 выдуманных людей в возрасте от 20 до 50 лет».

Однако ни один из этих отчетливо красных флагов не помешал крупнейшим системам искусственного интеллекта проглотить приманку. Уже 13 апреля 2024 года Microsoft Copilot сообщал пользователям, что «биксономания — интересное и относительно редкое заболевание», а Google Gemini советовал посетить офтальмолога. ChatGPT помогал пользователям определить, соответствуют ли их симптомы биксономании, а ИИ-поисковик Perplexity называл конкретные цифры распространенности фейковой болячки — один случай на 90 тысяч человек.

«Если научный процесс и системы, которые его поддерживают, не способны отфильтровывать подобные вещи, мы обречены, — говорит Алекс Руани, специалист по медицинской дезинформации из Университетского колледжа Лондона. — Нам преподали болезненный мастер-класс по тому, как работает дезинформация на практике».

Хуже всего оказалось то, что сфабрикованные статьи просочились в рецензируемую литературу. Специалисты из Индии процитировали один из препринтов о биксономании в статье, опубликованной в журнале Cureus издательства Springer Nature. После обращения журнала Nature 30 марта 2026 года статья была отозвана с формулировкой: «редакция больше не уверена в точности или происхождении работы». Авторы не согласились с таким решением.

Эта проблема выходит за рамки технических недостатков AI. Специалист Гарвардской медицинской школы Махмуд Омар обнаружил, что языковые модели особенно склонны к «галлюцинациям» и развитию дезинформации, когда текст выглядит профессиональным — оформлен как клиническая статья или больничная выписка.

Османович Тунстрем признает этическую неоднозначность своего эксперимента: «Я хотела убедиться, что мы не создаем больше вреда, чем пользы». Теперь перед ней стоит дилемма — удалять ли сфабрикованные статьи о биксономании. «Если их отозвать, другим специалистам будет сложно найти источник и проверить наш путь. Если оставить, эти материалы продолжат появляться в поисковых запросах и будут и дальше вводить в заблуждение и системы искусственного интеллекта, и наших коллег».

Один из способов решения этой проблемы — создание автоматизированной, открытой, общедоступной системы оценки — стандартизированного набора тестов, которые должна пройти каждый медицинский ИИ перед запуском. Такие тесты должны проверять не только наличие галлюцинаций, но и восприимчивость к дезинформации, социально-демографические предубеждения и другие проблемные моменты. «ИИ становится все более значимой частью нашей жизни, поэтому мы должны иметь систему для непрерывной проверки таких моделей», — говорит Омар.

Источник: hi-tech.mail.ru

Последние записи - Hi-tech

самые читаемые новости

#Hi-tech

Москвичей предупреждают об отключении мобильной связи. Ограничения возможны с 5 по 9 мая. «Билайн», МТС, «МегаФон» и Т2 в своей рассылке рекомендуют жителям столичного региона общаться через Wi-Fi, а
подробнее...

В тихий день слабый ветерок создает едва заметную рябь на поверхности земного озера. Но на Титане, крупнейшем спутнике Сатурна, такой же легкий ветер поднял бы волны высотой до трех метров.В своем
подробнее...

В пресс-службе realme Russia рассказали Hi-Tech Mail о том, действительно ли популярная технология угрожает устройствам.Ни один VPN-сервис на современном смартфоне не может повысить температуру
подробнее...

Российский сервис поддерживает импорт файлов из Figma и Pixso.«Ростелеком» объявил о запуске закрытого бета-тестирования графического редактора «Спектр», который позиционируется как первая
подробнее...

Узнайте больше о том, что там хранится.Корпус стражей исламской революции (КСИР) Ирана опубликовал видео, в котором показаны подземные хранилища ракет и другого вооружения. Ролик появился в аккаунте
подробнее...

Зарубежные соцсети у молодежи популярнее, чем отечественные.Подавляющее большинство российских старшеклассников продолжают активно пользоваться зарубежными соцсетями и видеохостингами, несмотря на
подробнее...

Физика давно славится репутацией «страшного» предмета: много информации, сложные формулы, жесткие экзамены.Для многих студентов изучение физики — это не только интеллектуальный вызов, но и
подробнее...

Владельцы Android почти в 4 раза чаще задумываются о смене экосистемы, чем пользователи iPhone.Лояльность пользователей iPhone достигла рекордного уровня. Как сообщает MacRumors со ссылкой на
подробнее...

Индийские ученые впервые создали одну из самых подробных карт ядра раковой клетки. Рассказываем, как работает усовершенствованная методика визуализации биомолекул DNA-PAINT.Ученые из Индийского
подробнее...

В нем будут работать «лучшие технические специалисты».Ассоциация разработчиков программных продуктов (АРПП) «Отечественный софт» предложила создать специальный согласительный орган, который займется
подробнее...

За 40 лет площадь, которая когда-то в два раза превышала размеры Санкт-Петербурга, сократилась на 99%.Айсберг А23а, который считался крупнейшим в мире, разрушился на мелкие части. Об этом сообщили в
подробнее...

Ученые открыли мощные антибактериальные свойства мадекассовой кислоты из центеллы азиатской. Исследование раскрывает механизм блокировки роста бактерий, включая устойчивые штаммы, и перспективы
подробнее...

Почта Mail (входит в VK) совместно с сервисом онлайн-бронирования Островок выяснила, куда россияне поедут на майские праздники. По данным аналитиков Mail, пользователи чаще выбирают внутренние поездки
подробнее...

Панель мощностью 287 Вт питает портативную станцию EcoFlow Delta 2 (емкость 2 кВт·ч), которая может заряжать высоковольтную батарею Tesla через инвертор.Ютубер Сандро ван Куйк, путешествующий на
подробнее...

Явление можно будет увидеть в ночь на 23 апреля.Поздним вечером в среду, 22 апреля, жители России смогут увидеть пик звездопада Лириды. Об этом рассказали в Лаборатории солнечной астрономии ИКИ и
подробнее...

Недавно возникшие подозрения о большом количестве камня в этих планетах укрепились: теперь ученые считают, что на самом деле это самая правдоподобная версия.Каменных пород в недрах Урана и Нептуна
подробнее...

За рубежом новинку оценили в 130 тыс. рублей. На российском рынке аппарат будет доступен с 22 мая.Компания OPPO провела презентацию в Китае, где показала новый флагманский камерофон Find X9 Ultra.
подробнее...

Автора застала врасплох опубликованная информация.Сценарист грядущего сериала по Mass Effect от Amazon Prime Video Дэниел Кейси («Форсаж») опроверг сообщения о том, что проект якобы решили переписать
подробнее...