NVIDIA Nemotron-Labs-Diffusion 14B Base

Nemotron-Labs-Diffusion 14B Base — крупнейший текстовый базовый чекпойнт семейства для исследовательской адаптации.

Nemotron-Labs-Diffusion 14B Base — старший по размеру базовый текстовый чекпойнт в семействе NVIDIA, опубликованном на 3B, 8B и 14B масштабах. Версия Base предназначена для продолжения обучения, адаптации и исследований, а не для роли готового чат-ассистента. Как и остальные языковые варианты семейства, она объединяет авторегрессионный и диффузионный режимы и может выполнять self-speculation.

Для чего нужен крупный Base-чекпойнт

Исследования и дальнейшая настройка

14B Base — вариант для тех, кому нужна старшая исходная модель и кто готов самостоятельно провести настройку под прикладные данные. По числу параметров она крупнее 8B Base и 3B Base. Сам размер не гарантирует более высокое качество в любом сценарии: результат зависит от адаптации, промпта, вычислительной среды и выбранного режима генерации.

Диффузионный режим в той же модели

Менять можно способ вывода, а не веса

В отличие от схемы, где быстрый декодер является отдельной моделью, Nemotron-Labs Diffusion использует разные attention patterns и режимы при инференсе. Диффузионное декодирование уточняет последовательности блоками, а self-speculation параллельно предлагает токены и проверяет их авторегрессионным способом. Это позволяет исследовать скорость генерации и корректность на одинаковом чекпойнте, хотя измерения нужно проводить на собственной нагрузке.

Ресурсы и лицензия

Старший размер предъявляет более высокие требования

При одинаковой точности весов 14B обычно требует больше памяти, чем 8B и 3B; точный объём зависит от формата, кэширования и контекста. NVIDIA выпустила текстовые модели семейства под NVIDIA Nemotron Open Model License. Для инструкционно настроенной модели 14B используйте отдельную страницу Nemotron-Labs-Diffusion 14B Instruct.

Связанные модели и разработчик

Семейство Nemotron-Labs Diffusion

NVIDIA Nemotron-Labs-Diffusion 14B Instruct · NVIDIA Nemotron-Labs-Diffusion 8B Base · NVIDIA Nemotron-Labs-Diffusion 3B Base · NVIDIA в Вики Futuretools

Публичный выпуск и первичный источник

Карточка модели NVIDIA

Официальная карточка NVIDIA называет чекпойнт `Nemotron-Labs-Diffusion-14B-Base`; NVIDIA указывает семейство базовых и чат-моделей размеров 3B, 8B и 14B в анонсе от 23.05.2026. Анонс линейки: NVIDIA: Nemotron-Labs Diffusion. Чекпойнт: Nemotron-Labs-Diffusion-14B-Base.