Tencent запустив модель Hy4 з 770 млрд параметрів
Tencent представив модель Hy4 з 770 млрд параметрів та 49 млрд активних на токен. Модель розуміє текст, зображення та відео з контекстом 1 млн токенів.
🔬 Дослідження без продукту. Це модель у репозиторії, а не готовий сервіс — компанія на 10-50 людей не зможе її використати без власної інженерної команди.
🎯 Чи підходить це вашому бізнесу?
Заповніть профіль компанії — і ми автоматично покажемо, чи варто вам це впроваджувати.
Заповнити профіль · 30 секундTL;DR
- •
Загальна кількість параметрів: 770 млрд
- •
Активних параметрів на токен: 49 млрд
- •
Довжина контексту: 1 млн токенів
- •
Архітектура: Mixture-of-Experts
- •
Джерело: репозиторій на Hugging Face, комерційного продукту немає
Як це змінить ваш ринок?
Для компаній до 200 людей це нічого не змінює. Модель такого розміру потребує власних GPU-кластерів і інженерів, що недоступно для малого та середнього бізнесу.
Визначення: Mixture-of-Experts — архітектура, де для кожного токена активується лише частина параметрів, що зменшує обчислювальні витрати.
Для кого це і за яких умов
Тільки для компаній з власною ML-командою і бюджетом на обладнання. Мін. вимоги: декілька GPU класу A100/H100, час на впровадження — тижні чи місяці.
Альтернативи
| Продукт 1 | Продукт 2 | Продукт 3 | |
|---|---|---|---|
| Ціна | дані не розкриті | дані не розкриті | дані не розкриті |
| Де працює | Hugging Face | Hugging Face | Hugging Face |
| Мін. вимоги | GPU-кластер | GPU-кластер | GPU-кластер |
| Ключова різниця | 770B параметрів | дані не розкриті | дані не розкриті |
💬 Часті запитання
Чи може малий бізнес використати цю модель?
Ні. Для роботи потрібні власні сервери з GPU та інженерна команда.
Чи є модель безкоштовною?
Дані про ліцензію та ціни не розкриті.
Що таке 49 млрд активних параметрів?
Це кількість параметрів, які використовуються для обробки одного токена, а не загальна розмірність моделі.
Такий розбір щоранку о 08:00
Персональний AI-дайджест для вашої галузі — щодня у Telegram
Джерела
Shir-man Trending — оригіналAI Advisory Board
Навчіть вашу команду будувати такі AI-автоматизації
За 5 днів кожен співробітник побудує автоматизацію для своєї ділянки роботи.
Дізнатись більше → aiadvisoryboard.me