IC-Light (V2): control mágico de la iluminación de la imagen, controla la luz y la sombra de la imagen y el fondo

Introducción general

IC-Light es un proyecto de control de la iluminación de imágenes cuyo objetivo es manipular los efectos lumínicos de las imágenes mediante modelos avanzados de IA. El proyecto, desarrollado por Lvmin Zhang et al, ofrece dos modelos principales: un modelo de reiluminación condicionado por el texto y otro condicionado por el fondo. Los usuarios pueden ajustar la iluminación de la imagen en primer plano para que coincida con la iluminación ambiental del fondo mediante sencillas indicaciones de texto o imágenes de fondo, con lo que se consiguen efectos de iluminación y composición de imágenes de alta calidad.

IC-Light V2 (demostración) es una gama de productos basada en Flux El modelo IC-Light, que se beneficia de VAE de 16 canales, alta resolución nativa y mejores métodos de entrenamiento, conserva muchos más detalles que la SD1.5.

Experiencia en línea: https://huggingface.co/spaces/lllyasviel/IC-Light

IC-Light V2 para modelos FLUX

Lista de funciones

• Modelos de reiluminación condicional textualControla el efecto de iluminación de una imagen introduciendo un texto.
• modelo de condiciones de fondoPermite ajustar automáticamente la iluminación de la imagen en primer plano en función de la imagen de fondo.
• Descarga automática de modelosNo es necesario descargar los modelos manualmente, el sistema los procesará automáticamente.
• Múltiples ajustes de preferencia de luzEl usuario puede seleccionar diferentes direcciones e intensidades de luz.
• Soporte de alta resolución: Admite el procesamiento de imágenes de alta resolución, conservando los detalles de la imagen.
• luz uniformePermite una mezcla coherente de diferentes fuentes de luz para espacios HDR.

Utilizar la ayuda

Proceso de instalación

1. proyecto de clonación::

   git clone https://github.com/lllyasviel/IC-Light.git
   cd IC-Light
   

2. Crear y activar un entorno virtual::

   conda create -n iclight python=3.10
   conda activate iclight
   

3. Instalación de dependencias::

   pip install torch torchvision --index-url https://download.pytorch.org/whl/cu121
   pip install -r requirements.txt
   

Reiluminación de modelos mediante condiciones de texto

1. Ejecute el script de ejemplo::

   python gradio_demo.py
   

2. pregunta de entrada: Introduce indicaciones de texto en la interfaz de Gradio, como "mujer guapa, rostro detallado, ambiente cálido, en casa, dormitorio".
3. Seleccionar preferencias de luz: Seleccione la dirección de la luz que desee, por ejemplo, "Izquierda".
4. Generación de imágenesPulse el botón Generar para ver el efecto de la imagen ajustada.

Utilización de modelos de condiciones de fondo

1. Ejecute el script de ejemplo::

   python gradio_demo_bg.py
   

2. Subir imagen de fondoCarga una imagen de fondo en la interfaz de Gradio.
3. Mensajes de entrada en primer plano: Introduzca una descripción de la imagen en primer plano, por ejemplo, "hombre guapo, iluminación cinematográfica".
4. Generación de imágenesPulse el botón Generar para ver el efecto de la imagen ajustada.

Funciones avanzadas

• uniformidad fotométricaIC-Light: IC-Light garantiza la coherencia de la luz en el espacio HDR, lo que resulta en una mezcla natural de diferentes fuentes de luz.
• Retención de detalles: Mantiene un alto nivel de detalle y resolución de las imágenes mediante modelos VAE de 16 canales.
• estilo: Soporte para procesar imágenes estilizadas, manteniendo el estilo artístico original.

problemas comunes

• ¿Cómo se manejan las imágenes con poca luz? Utilizando el modelo de condiciones de fondo, introduzca una descripción de la imagen con poca luz y el sistema ajustará automáticamente la iluminación.
• ¿Admite el uso comercial? La versión actual es sólo para uso no comercial. Para uso comercial, póngase en contacto con el equipo de desarrollo para obtener una licencia.

IC-Light instalador de un solo clic desempaquetar contraseña y colab despliegue:

https://colab.research.google.com/drive/1RDxmqrTBg2QZeIRtxRW6h-teQRn50hN2?usp=sharing
niugee51 o niugee22