Gemma 3n E4B Instruct Preview Small
GoogleGemma 3n E4B Instruct Preview (май 2025) демонстрирует индекс интеллекта ниже среднего, но обладает выгодным соотношением цены и качества по сравнению с другими моделями с открытыми весами без функции reasoning аналогичного размера. Модель поддерживает ввод текста, выдает текстовый ответ и имеет контекстное окно объемом 32 000 токенов с знаниями, актуальными по август 2024 года.
Обзор
Gemma 3n E4B Instruct Preview (май 2025) демонстрирует индекс интеллекта ниже среднего, но обладает выгодным соотношением цены и качества по сравнению с другими моделями с открытыми весами без функции reasoning аналогичного размера. Модель поддерживает ввод текста, выдает текстовый ответ и имеет контекстное окно объемом 32 000 токенов с знаниями, актуальными по август 2024 года.
Бенчмарки
| Бенчмарк | Значение |
|---|---|
| GPQA Diamond наука, экспертный уровень | 27.8% |
| HLE Humanity's Last Exam | 4.9% |
| MMLU-Pro знания, 12K вопросов | 48.3% |
| SciCode научный код | 8.6% |
| MATH-500 математика | 74.9% |
| LiveCodeBench генерация кода | 13.8% |
| HumanEval генерация кода | 75.7% |
Производительность и цена
Сравнение
| Модель | Index | Код | Контекст | Цена $/1M | Скорость |
|---|---|---|---|---|---|
| GO Gemma 3n E4B Instruct Preview | 4.6 | 14 | 32k | 0 | — |
| MI Phi-3 Mini Instruct 3.8B | 4.6 | 12 | 4k | 0 | — |
| GO Gemini 1.0 Ultra | 4.6 | — | 33k | 0 | — |
| AL Qwen2.5 Coder Instruct 7B | 4.5 | 13 | 131k | 0 | — |