ШІ помиляється в 57% відповідей на фінансові питання У межах експерименту 18 моделям поставили понад

ШІ помиляється в 57% відповідей на фінансові питання

У межах експерименту 18 моделям поставили понад 10 тисяч запитань. Серед найпопулярніших - ChatGPT, Claude, Copilot, Grok і Gemini.

На найскладніших питаннях, які потребували кількох обчислень, помилки траплялися у 88% випадків. Алгоритми рахували неправильно, не враховували зміни в податкових правилах і посилалися на норми, яких не існує.

Наприклад, помилка Claude Haiku в податкових правилах могла обернутися для вкладника великим штрафом, а в питанні про студентські позики бот вигадав неіснуюче правило про скасування виплат у разі переїзду за кордон.

Найменша частка помилок серед протестованих моделей - у Claude Opus 5 у режимі «роздумів»: 39%.

🕹️Кібер_ua - Підписатись