Kolors

Kwai-Kolors
Texto a imagen

Kolors es un modelo de generación de texto a imagen a gran escala basado en la difusión latente, desarrollado por el equipo de Kuaishou Kolors. Entrenado con miles de millones de pares de texto e imagen, Kolors exhibe ventajas significativas sobre los modelos de código abierto y propietarios en calidad visual, precisión semántica compleja y renderización de texto tanto en caracteres chinos como ingleses. Además, Kolors admite entradas tanto en chino como en inglés, demostrando un rendimiento sólido en la comprensión y generación de contenido específico en chino. Para más detalles, consulte este informe técnico.

Como usar

Requisitos

  • Python 3.8 o posterior
  • PyTorch 1.13.1 o posterior
  • Transformers 4.26.1 o posterior
  • Recomendado: CUDA 11.7 o posterior

Clonación del repositorio e instalación de dependencias

a```sh apt-get install git-lfs git clone https://github.com/Kwai-Kolors/Kolors cd Kolors conda create --name kolors python=3.8 conda activate kolors pip install -r requirements.txt python3 setup.py install


### Descarga de pesos (vínculo):

```sh
huggingface-cli download --resume-download Kwai-Kolors/Kolors --local-dir weights/Kolors

or

git lfs clone https://huggingface.co/Kwai-Kolors/Kolors weights/Kolors

Inferencia:

python3 scripts/sample.py "一张瓢虫的照片,微距,变焦,高质量,电影,拿着一个牌子,写着“可图”"
# La imagen se guardará en "scripts/outputs/sample_test.jpg"

Uso con Diffusers

Por favor, consulte https://huggingface.co/Kwai-Kolors/Kolors-diffusers.

Funcionalidades

Generación de texto a imagen a gran escala
Basado en la difusión latente
Entrenado con miles de millones de pares de texto e imagen
Alta calidad visual
Precisión semántica compleja
Renderización de texto tanto en caracteres chinos como ingleses
Admite entradas en chino e inglés

Casos de uso

Generación de imágenes fotorrealistas a partir de descripciones textuales
Mejora de la precisión semántica en la generación de imágenes
Renderización de texto en caracteres chinos e ingleses
Aplicaciones en investigación académica
Desarrollo de contenido específico en chino