Релиз Google Gemma 4: мультимодальность, архитектура PLE и открытая лицензия Apache 2.0

Google выпустил линейку открытых мультимодальных моделей Gemma 4 под лицензией Apache 2.0, охватывающую широкий спектр конфигураций от компактных устройств до мощных серверных инстансов. Новая архитектура объединяет поддержку текста, изображений и аудио, а также демонстрирует топовые показатели в бенчмарках. Главные технические особенности Gemma 4: * Разнообразие моделей: Линейка включает пять базовых и инструктивных версий, включая плотные модели и Mixtral-подобные MoE (например, 26B MoE с активацией всего 4B параметров). * Per-Layer Embeddings (PLE): Параллельный низкоразмерный конвейер кондиционирования для каждого слоя, снижающий нагрузку на первичный вектор эмбеддингов и улучшающий специализацию слоев при минимальном оверхеде. * Мультимодальность: Нативная поддержка изображений с переменным соотношением сторон и настраиваемым количеством токенов, а для младших версий (E2B, E4B) и 12B Unified доступна работа с аудио. * Экосистема деплоя: Нативная поддержка со старта в transformers, llama.cpp, MLX, WebGPU и других популярных фреймворках для эффективного инференса. 💡 Где захостить и как запустить: Рассчитать точный VRAM под кванты этой модели, скорость генерации (токенов/сек) и выбрать подходящий сервер с GPU можно у нас на ServerSales в калькуляторе AI-моделей (/ai) или каталоге GPU (/gpu).