Sonata

ИИ-чат-боты ошибаются в финансовых советах в 57% случаев

image source

Новое исследование показало, что популярные чат-боты с ИИ ошибаются в среднем в 57% случаев, отвечая на вопросы о финансах. Доверие таким советам может обернуться реальными денежными потерями для пользователей.

Авторы протестировали 18 ИИ-моделей — ChatGPT, Gemini, Claude, Copilot и Grok, задав им более 100 вопросов о деньгах, включая бесплатные и платные версии. Всего обработано свыше 10 000 запросов.

Эксперты нашли не только арифметические ошибки, но и «галлюцинации» — выдуманные финансовые правила и законы, а также игнорирование грядущих изменений в налоговом законодательстве.

Если вопрос требовал нескольких математических действий, доля ошибок вырастала в среднем до 88%, а в отдельных случаях достигала 99%.

Так, бесплатная Claude Haiku 4.5 дала совет по пенсионным накоплениям, следуя которому житель Великобритании получил бы штраф в 17 500 фунтов. Другая модель «придумала» несуществующее правило об отмене выплат по студенческой ссуде при переезде за границу.

Платные и более новые версии моделей показывают результаты точнее. Лучшей оказалась Claude Opus 5 в режиме рассуждений — 39% ошибок.

Финансовые консультанты платформы AJ Bell отмечают, что им приходится исправлять последствия необдуманных решений клиентов, доверившихся советам ИИ. При этом ИИ неплохо справляется с анализом бюджета и расходов.

Опросы показывают: каждый пятый взрослый британец готов доверить ИИ серьёзные финансовые решения — пенсии, займы, инвестиции. Молодёжь доверяет ИИ больше, чем финансовым блогерам и ТВ-передачам.

В отличие от услуг живых консультантов, использование ИИ не даёт права на компенсацию при потере денег. Авторы исследования считают, что эта сфера нуждается в законодательном регулировании.

источник

Загрузка страницы