📌Відкрита відеомодель MAGI-2 Preview від Sand. — Нейроєнот

Нейроєнот | Нейромережа Midjourney, chat GPT та інші

@neuroenot

Захопливо про нейромережі та проривні технології. Ласкаво просимо у майбутнє. #добірка - добірка всіх новин за тиждень Для друга: https://t.me/neuroenot Співпраця та зв'язок: @New_Life_Technology

📌Відкрита відеомодель MAGI-2 Preview від Sand.ai

Sand.ai відкрила код і weights MAGI-2 Preview — MoE-моделі для генерації відео із синхронним аудіо. Модель може створювати ролики тривалістю до 10 секунд, а фінальний етап підвищує роздільність до 1080p.

🔆Детальніше

• MAGI-2 використовує fine-grained MoE-архітектуру.

• Загальний обсяг моделі становить 114B параметрів, але на кожному токені активними є близько 6B.

• Відео та синхронна аудіодоріжка генеруються в межах одного пайплайна.

• Генерація відбувається у два етапи: спочатку створюється відео в нижчій роздільності, після чого окремий refiner підвищує якість до 1080p.

• За заявою Sand.ai, MoE-архітектура дозволила суттєво зменшити обчислювальні витрати порівняно з великими dense-моделями.

• Водночас для локального запуску MAGI-2 потрібні значні ресурси, тому це поки не варіант для відеокарти на 24 ГБ.

➡️Код тут.
➡️Ваги моделі тут.
➡️Технічний звіт тут.

➡️Запроси друга до НейроЄнота🦝