ReMM SLERP 13B — объединённая модель на основе Llama 2

ReMM SLERP 13B — экспериментальная объединённая модель Undi95 на основе нескольких настроек Llama 2. Автор описывает её как новое прочтение MythoMax с применением метода SLERP.

ReMM SLERP 13B — объединённая модель автора Undi95. Она построена на Llama 2 13B и сочетает несколько открытых настроек, включая модели Nous Research и другие пользовательские сборки. Автор описывает проект как переосмысление MythoMax с обновлённым составом и слиянием SLERP. О разработчике — Вики FutureTools: Вики FutureTools об Undi95.

Что означает SLERP

SLERP — способ плавно объединять параметры нескольких моделей, интерполируя между ними в пространстве весов. Это отличается от обычного последовательного дообучения: итоговая модель получается из совмещения исходных настроек. Результат зависит от выбранных моделей и коэффициентов, поэтому само название метода не гарантирует улучшения по всем задачам.

Назначение и лицензия

Карточка проекта относит ReMM к серии моделей для общения и генерации текста, связанных с MythoMax. Она указывает лицензию CC BY-NC 4.0, то есть некоммерческие условия и обязательства по атрибуции. С исходной моделью можно сравнить MythoMax 13B.

Запуск

Веса и инструкция по формату диалога опубликованы автором на Hugging Face. Модель использует формат Alpaca, указанный в карточке, но совместимость шаблона и конкретного файла стоит проверить в выбранном интерфейсе. API-маршрут OpenRouter имеет собственные ограничения контекста и доступности.

Описание слияния, состав моделей и условия использования приведены в карточке ReMM SLERP на Hugging Face; доступ к API-маршруту указан в OpenRouter.