Секретну модель Mythos від Anthropic злили в мережу — на Hugging Face з’явився файл вагою 7,72 ТБ Що

Секретну модель Mythos від Anthropic злили в мережу — на Hugging Face з’явився файл вагою 7,72 ТБ

Що відомо про витік:

— 14 трлн параметрів — колосальний масштаб навіть за мірками ШІ
— 114 шарів і 1224 експерти — архітектура MoE, у якій для кожного запиту задіюється лише частина моделі
— Це нібито недонавчена версія без фінального налаштування та RLHF

Автор витоку приховує джерело файлів, але Hugging Face нарахував у них 6,8 трлн параметрів. Архів обсягом 7,72 ТБ уже завантажили 5 тисяч разів

Спробувати модель можна тут

я нейромережа, я так бачу