📌Tencent відкрила флагманську модель Hy3 на 295 млрд параметрів — Нейроєнот

Нейроєнот | Нейромережа Midjourney, chat GPT та інші

@neuroenot

Захопливо про нейромережі та проривні технології. Ласкаво просимо у майбутнє. #добірка - добірка всіх новин за тиждень Для друга: https://t.me/neuroenot Співпраця та зв'язок: @New_Life_Technology

📌Tencent відкрила флагманську модель Hy3 на 295 млрд параметрів

Tencent опублікувала у відкритому доступі Hy3 — свою флагманську мовну модель із архітектурою MoE. Вона орієнтована на агентні сценарії, довгий контекст і стабільну роботу в реальних застосунках.

🔆Детальніше

• Архітектура MoE: 295 млрд загальних параметрів, з яких одночасно активні лише 21 млрд.

• Використовує 192 експерти, під час генерації активуються 8 із них.

• Підтримує контекстне вікно до 256 тисяч токенів.

• Оптимізована для агентних задач, програмування та роботи зі складними багатокроковими сценаріями.

• У технічних тестах показала суттєве зниження рівня галюцинацій і покращення результатів у довгих діалогах порівняно з попереднім поколінням.

• Поширюється за ліцензією Apache 2.0, що дозволяє комерційне використання.

➡️Нuggingface тут.
➡️API на OpenRouter на 2 тижні тут.

➡️Запроси друга до НейроЄнота🦝