ИИ провалился с поиском информации в интернете
Результаты исследования были опубликованы на сайте организации.
В рамках исследования ученые проверили точность поиска информации в интернете чат-ботами, основанными на различных моделях ИИ. Для этого было выбрано 200 статей из 20 различных изданий, и для каждого чат-бота было составлено задание указать исходную статью, издание и год публикации, предоставив точную цитату из текста в качестве подсказки.
Исследование показало, что в общей сложности ИИ правильно указывал происхождение цитаты и предоставлял ссылку на источник в 60% случаев. В сравнении с этим, при ручном поиске источник по цитате удавалось найти в 100% случаев, поскольку статьи отображались в топ-3 результатов поиска Google. Результаты работы ИИ были названы недостаточно удовлетворительными.
Особенно плохие результаты показали обе версии Grok AI от X: например, Grok-3 Search допускал ошибки в 94% обработанных запросов. Copilot от Microsoft отказался обрабатывать 104 запроса из 200, а из оставшихся 96 лишь 16 были полностью верными. Также было выявлено, что платные версии чат-ботов искали информацию лишь немного эффективнее, чем их бесплатные аналоги.
В заключении ученые отметили, что их удивило "нежелание" чат-ботов цитировать источники. Например, ИИ либо не предоставлял исходную статью, либо ошибочно ссылался на другую публикацию. Например, модель DeepSeek неправильно приписала авторство материала в 115 из 200 случаев.
Ранее в Microsoft было объявлено о работе над новыми форматами контекстной рекламы, ориентированными на пользователей сервисов ИИ. Появление контекстной рекламы нового типа ожидается в ИИ-сервисе Copilot.
Источник и фото - lenta.ru
