🫡 ШІ помиляється, але ви не перевіряєте Дослідження компанії Saturn перевірило 18 моделей від OpenAI

🫡 ШІ помиляється, але ви не перевіряєте

Дослідження компанії Saturn перевірило 18 моделей від OpenAI, Anthropic, Google, Microsoft та xAI. Задали понад сто фінансових запитань, кожне повторювали до п'яти разів - разом більш як 10 тисяч відповідей. У середньому хибними виявилися 57%.

Найгірше моделі впоралися там, де відповідь вимагає кількох послідовних обчислень. У таких питаннях середня частка помилок 88%, а окремі моделі помилялися у 99% випадків. Все так сумно, тому що кожен крок розрахунку додає власну ймовірність похибки, і вони накопичуються.

Про типи помилок. Це не вигадки про ринок, а розрахунки, ігнорування податкових змін, які ще тільки набувають чинності і вигадані правила. В одному випадку модель порадила британцю припинити виплати за студентським кредитом після переїзду за кордон, хоча такого правила не існує.

Платні версії відповідали точніше за безкоштовні, а новіші краще за старіші. Найкращий результат у Claude Opus 5 в режимі міркувань, але й вона помилилася у 39% відповідей.
FCA при цьому фіксує, що кожен п'ятий дорослий британець готовий довірити ШІ фінансові рішення.

✍️ Там, де ціна помилки вимірюється реальними грошима ви повинні мати зрозумілий спосіб перевірити і оцінити пораду і компетентність.
Те, що справді працює ефективно ми пояснюємо простими словами на курсах:
👉ШІ - твій помічник на фондовому ринку
👉 та ШІ для крипти: від аналізу ринку до власного бота

І, звісно, Agent HUGS: https://app.agenthugs.ai/ як окремий повноцінний інструмент
Ми вже додали блок опціонів та GEX.
Частина інформації Агента доступні безкоштовно, а також створена група в ТГ каналі https://t.me/AgentHUGS для обговорень та комунікації. Там вже опублікована інструкція щодо оновлення. Приєднуйтеся!

Сайт | LifeHUGS |AgentHUGS| YouTUBE Еріка Наймана