Когда в конце прошлого года Google выпустила Gemini 3 Pro, это стало значительным шагом для крупных LLM компании. Теперь компания переносит часть тех же технологий, которые сделали эти модели возможными, в открытую среду с новым семейством открытых моделей — Gemma 4.
Google предлагает четыре различные версии Gemma 4, отличающиеся количеством параметров. Для периферийных устройств, в частности смартфонов, компания подготовила 2-миллиардную и 4-миллиардную «Effective»-модели.
Для более мощных машин — 26-миллиардную систему «Mixture of Experts» и 31-миллиардную «Dense». Для тех, кто не знаком с темой: параметры — это настройки, которые большая языковая модель может изменять для генерации ответа.
Как правило, модели с большим количеством параметров дают лучшие результаты, однако для их запуска требуется и более мощное железо. «С Gemma 4 нам удалось разработать системы с беспрецедентным уровнем интеллекта на параметр», — утверждает Google.
Читать на itc.ua