IC-Light (V2) : magie de contrôle de l'éclairage de l'image, contrôle de la lumière, de l'ombre et de l'arrière-plan de l'image

Introduction générale

IC-Light est un projet de contrôle de l'éclairage des images qui vise à manipuler les effets d'éclairage des images grâce à des modèles d'intelligence artificielle avancés. Le projet, développé par Lvmin Zhang et al, propose deux modèles principaux : un modèle de ré-éclairage conditionnel au texte et un modèle conditionnel à l'arrière-plan. Les utilisateurs peuvent ajuster l'éclairage de l'image de premier plan en fonction de l'éclairage ambiant de l'arrière-plan à l'aide de simples invites textuelles ou d'images d'arrière-plan, ce qui permet d'obtenir des effets de composition et d'éclairage d'image de haute qualité.

IC-Light V2 (démo) est une gamme de produits basés sur Flux Le modèle IC-Light, qui bénéficie d'une VAE à 16 canaux, d'une haute résolution native et de meilleures méthodes d'entraînement, conserve beaucoup plus de détails que le SD1.5.

Expérience en ligne : https://huggingface.co/spaces/lllyasviel/IC-Light

IC-Light V2 pour les modèles FLUX

Liste des fonctions

• Modèles d'éclairage conditionnel textuel: Contrôler les effets d'éclairage d'une image en saisissant des invites de texte.
• conditions de base modèle: Ajuste automatiquement l'éclairage de l'image de premier plan en fonction de l'image d'arrière-plan.
• Téléchargement automatique du modèleIl n'est pas nécessaire de télécharger les modèles manuellement, le système les traitera automatiquement.
• Réglages multiples des préférences lumineusesL'utilisateur peut sélectionner différentes directions et intensités de lumière.
• Support haute résolutionLa technologie de l'image : elle prend en charge le traitement des images à haute résolution, en préservant les détails de l'image.
• lumière uniformeLa fonction HDR : assure un mélange cohérent des différentes sources de lumière pour les espaces HDR.

Utiliser l'aide

Processus d'installation

1. projet de clonage: :

   git clone https://github.com/lllyasviel/IC-Light.git
   cd IC-Light
   

2. Créer et activer un environnement virtuel: :

   conda create -n iclight python=3.10
   conda activate iclight
   

3. Installation des dépendances: :

   pip install torch torchvision --index-url https://download.pytorch.org/whl/cu121
   pip install -r requirements.txt
   

Rallumage des modèles à l'aide de conditions de texte

1. Exécuter l'exemple de script: :

   python gradio_demo.py
   

2. invite à la saisieLes textes de l'interface de Gradio, tels que "belle femme, visage détaillé, atmosphère chaleureuse, à la maison, chambre à coucher", peuvent être saisis.
3. Sélection des préférences en matière de lumière: Sélectionnez la direction de la lumière selon vos besoins, par exemple "Gauche".
4. Générer des imagesCliquez sur le bouton Générer pour visualiser l'effet de l'image ajustée.

Utilisation de modèles de conditions de fond

1. Exécuter l'exemple de script: :

   python gradio_demo_bg.py
   

2. Télécharger l'image de fondTélécharger une image d'arrière-plan dans l'interface de Gradio.
3. Saisie des messages d'avant-planDescription de l'image de premier plan : Saisissez une description de l'image de premier plan, par exemple "bel homme, éclairage cinématographique".
4. Générer des imagesCliquez sur le bouton Générer pour visualiser l'effet de l'image ajustée.

Fonctionnalités avancées

• uniformité photométriqueIC-Light : IC-Light assure la cohérence de la lumière dans l'espace HDR, ce qui permet d'obtenir un mélange naturel de différentes sources de lumière.
• Conservation des détailsLe modèle VAE à 16 canaux permet de maintenir un niveau élevé de détail et de résolution des images.
• styleLes images stylisées : aide au traitement des images stylisées, en conservant le style artistique d'origine.

problèmes courants

• Comment gérez-vous les images en basse lumière ? À l'aide du modèle de conditions d'arrière-plan, entrez une description de l'image à faible luminosité et le système ajustera automatiquement l'éclairage.
• Est-il possible de l'utiliser à des fins commerciales ? La version actuelle est réservée à un usage non commercial. Pour un usage commercial, veuillez contacter l'équipe de développement pour obtenir une licence.

IC-Light : installation en un clic, déballage du mot de passe et déploiement du colab :

https://colab.research.google.com/drive/1RDxmqrTBg2QZeIRtxRW6h-teQRn50hN2?usp=sharing
niugee51 ou niugee22