Kolors

Kolors — открытая модель Kuaishou для генерации изображений по тексту на китайском и английском языках.

Команда Kolors опубликовала веса и код базовой модели 6 июля 2024 года. Это модель преобразования текста в изображение, обученная на парах текст–изображение; в официальном описании разработчик отдельно отмечает поддержку китайского и английского языков.

Понимание запроса и текст в изображении

Команда Kolors сообщает о контекстном окне 256 токенов и отмечает сильные стороны модели в понимании сложных запросов и отображении китайского и английского текста на изображениях. Это открытая модель, которую можно запускать самостоятельно при наличии совместимого программного обеспечения и оборудования.

Лицензия и условия коммерческого использования

Код проекта открыт по Apache 2.0, а веса регулируются отдельной лицензией модели. В официальном репозитории разработчик устанавливает дополнительные условия и просит отдельно регистрировать коммерческое использование; перед внедрением нужно прочитать полную лицензию.

Обновления линейки

Позднее Kuaishou выпустила улучшенную версию Kolors 1.5 и поколение 2.0. Смотрите Kolors 1.5 Kolors 2.0 Kling Image O1

Технические ориентиры открытой модели

Официальный репозиторий указывает, что Kolors обучалась на миллиардах пар изображение–текст и использует латентную диффузию. Команда публикует веса, код и отдельные компоненты, включая Inpainting и ControlNet. Они расширяют базовую генерацию, но являются дополнительными компонентами проекта, а не характеристиками одной базовой модели.

Разработчик и первичный источник

Другие модели Kuaishou собраны в странице разработчика в Вики Futuretools.ru.

Название, дата и характеристики сверены с официальным материалом Kuaishou или команды модели.