PaliGemma 2 Mix

PaliGemma 2 Mix — отдельный выпуск семейства PaliGemma 2 от 19 февраля 2025 года. Google опубликовала смешанные checkpoint-варианты размеров 3B, 10B и 28B, включая google/paligemma2-3b-mix-224, google/paligemma2-10b-mix-224 и google/paligemma2-28b-mix-224. Это multimodal-модели для изображений и текста, которые формируют текстовый или предусмотренный обучением структурированный ответ.

Что означает Mix

Модель дообучена на сочетании задач

В отличие от pretrained-варианта, который разработчик адаптирует самостоятельно, Mix обучалась на смеси vision-language задач и рассчитана на исследовательский запуск в распространённых сценариях. В неё входят типы задач вроде описания изображений, визуальных вопросов, чтения надписей и локализации объектов. Слово Mix не означает, что модель одинаково хорошо решает любую задачу без тестирования.

Размеры и разрешение

Сверьте checkpoint перед запуском

Линейка включает 3B, 10B и 28B параметров; кроме разрешения 224, в репозиториях Google доступны варианты 448 и 896 пикселей. Разрешение влияет на видимость мелких деталей и вычислительную стоимость. Для выбора сравните качество, задержку и потребление памяти на одинаковых входных изображениях и используйте точный ID, соответствующий нужному разрешению.

Когда нужна pretrained PaliGemma 2

Для специальной задачи может понадобиться настройка

Если набор задач продукта отличается от использованных при подготовке Mix, начните с pretrained PaliGemma 2 и дообучите модель на репрезентативных данных. В любом варианте ответы проверяют на пропуски, ложные описания и устойчивость к качеству изображения; автономно использовать модель в критичных решениях без контроля не следует.

Связанные модели и разработчик

Модели семейства Gemma

PaliGemma 2 · PaliGemma · Gemma 3 · Google DeepMind в Вики Futuretools

Первичные источники

Документы, карточки и журнал релизов Google

документация PaliGemma · карточка PaliGemma 2 · официальный журнал выпусков Gemma · https://huggingface.co/google/paligemma2-3b-mix-224 · https://huggingface.co/google/paligemma2-10b-mix-224 · https://huggingface.co/google/paligemma2-28b-mix-224