Démystifier l'IA Manga Narration Vidéo du principe à la pratique (Vidéo composite)

Vidéo composite de fiction, fonctionnant en quatre parties :

1. Les romans génèrent des images
2. Roman Génération Audio
3. Vidéo sur les nouvelles synthèses
4. Vidéo raffinée secondaire

Nous avons tiré les leçons de nos enseignements précédentsDémystifier la narration d'une bande dessinée par l'IA : du principe à la pratique (Making Novel Scripts)Début, création d'un scénario de roman A la fin, nous obtenons un EXCEL cousu, veuillez le télécharger ou le générer vous-même selon le tutoriel.

Voyons d'abord le produit fini

Je démontrerai le processus en fonction du logiciel que j'utilise. (Les outils ne sont pas importants et, encore une fois, aucun logiciel payant n'est recommandé).

Les romans génèrent des images

1. commencer à créer

2) Avant de créer un roman, testez et déboguez d'abord l'environnement de mappage.

Assurez-vous que le débogage suivant est OK, puis cliquez sur "Créer un projet".

3. créer la première étape du projet, choisir d'importer le fichier de script

4. sélectionner le fichier EXCEL précédemment sauvegardé (impossible de retrouver l'article précédent)

5. vérifier le fichier d'importation, car tout le texte a été traité dans EXCEL, cette étape ne nécessite aucun ajustement !

6. préoccupés par le "rôle défini" dans le coin supérieur droit, nous pouvons encore être modifiés deux fois, attachés à d'autres styles de la LoRA !

Comme j'ai déjà débogué le style localement dans SD avant d'importer le fichier, je ne le modifierai pas ici.

Après l'enregistrement, passez à l'étape suivante pour générer des images.

7. entrer dans l'interface de génération d'images, ne pas cliquer sur "commencer à générer des images", vérifier à nouveau la configuration !

8. certaines de mes configurations

Je ne suis pas entré dans les détails de ma configuration à l'étape 2, je me contenterai donc d'énumérer les principaux éléments ici :

• Modèle : Ouka - National Style
• vae: vae-ft-mse-840000-ema-pruned
• Préréglage avant : (meilleure qualité, 4k, 8k, haute résolution, chef-d'œuvre:1.2), (ultra-détaillé), chef-d'œuvre, (chef-d'œuvre, qualité supérieure, meilleure qualité),
• Points négatifs : ne s'affiche pas, mots facilement violés, copiés de manière aléatoire
• Algorithme d'amplification : R-ESRGAN 4x+
• Taille de l'image : longue (De nombreux modèles suggèrent de générer une carte carrée, 512 * 512 peut être une carte carrée.)

Dans la figure ci-dessus, n'importe quel objectif, la liste du côté droit du bouton "Ajuster les paramètres", cliquez sur l'objectif actuel pour entrer dans les paramètres détaillés de la page de configuration.

Testez la génération d'images pour un ou deux objectifs, sentez-vous à l'aise, et commencez à générer des images en masse.

9. générer des images par lots

Jusqu'à la position actuelle, 37 graphiques, 3060 cartes, cela a pris environ 3 minutes.

Les points forts : l'installation de l'extension Tensorrt et la génération du modèle ONNX peuvent théoriquement être comprimées à 2 minutes.

10. zoom sans perte en un clic

Comme la génération par défaut est une image de petite taille (la vitesse de génération est rapide et il est pratique de l'ajuster), si ces images sont fondamentalement conformes aux exigences, il n'est pas nécessaire de les réparer (ici, je ne les répare pas), cliquez sur l'agrandissement non destructif.

À ce stade, nous avons un ensemble d'images, vous pouvez commencer à synthétiser automatiquement la vidéo, j'ai démontré les outils pour suivre la synthèse de la voix, le processus vidéo dans le logiciel ont, mais j'ai démontré l'utilisation des outils de génération audio à trois voies ici, lire à haute voix mieux.

Ces images vont d'abord ici... Tout d'abord, nous allons corriger la lecture du roman.

Roman Génération Audio

Ici, je n'utilise pas les solutions courantes de Microsoft, ni Tease. Tout compte fait, il est préférable d'opter pour la solution gratuite, mais avec des objectifs plus réalistes. écrêtage du son .

Nous avons sauvegardé le roman suivant et nous sommes allés à l'écrêtage du son pour commencer le processus...

Je suis déguisée en fée.

Pas la fée de la légende des mortels, mais la vraie, celle qui vole dans le ciel. L'Empereur du Ciel est mon père, et la Reine du Ciel est ma mère. Je suis donc née fée, avec une peau blanche et de longues jambes, et pleine d'esprit féerique.

Les journées d'une fée sont tout simplement trop confortables. Se défoncer, lire des livres et jouer avec les petites fées toute la journée dans leur propre palais, c'est génial.

Malheureusement, les bons moments n'ont pas duré longtemps avant que quelque chose ne se produise.

Cet après-midi-là, la petite fée servante de mon palais, Li Li, est arrivée en courant et en toute hâte : "Lotus blanc Immortel suprême ! Lotus blanc !"

"Entendez, entendez, arrêtez de crier." Même si cela fait des mois que je l'ai traversé, je ne suis toujours pas habituée à ce nom.

"L'immortel Lingfeng est revenu de sa descente dans le monde des mortels pour traverser la tribulation, allons lui rendre visite.

"Qui est l'Immortel Suprême Lingfeng ?"

"Immortel Suprême, tu as sommeil, c'est ton fiancé !"

"Hein ??"

C'est alors que je me suis souvenue que j'avais apparemment un fiancé. Pourquoi le nom de Ling Feng me semble-t-il si familier, c'est exactement le même que celui du héros du roman que j'ai lu avant de traverser ?

Après quelques recherches, j'ai fini par comprendre la situation : moi, White Lotus, je suis la contrepartie féminine de ce texte abusif.

Le personnage principal, Ling Feng, est un immortel supérieur du monde immortel, qui a atteint la position d'immortel supérieur en 20 000 ans, un talent rare dans le monde immortel. Bien que je sois également un Immortel supérieur, contrairement à lui qui s'est appuyé sur ses propres compétences pour se cultiver, je suis un Immortel de seconde génération, né en tant qu'Immortel supérieur.

Mon père, l'Empereur du Ciel, a vu le talent de Ling Feng et, à mon instigation, il s'est entendu avec le maître de Ling Feng, l'ancêtre Bodhi, et a organisé un mariage entre nous deux.

Mais Lingfeng n'était pas du tout satisfaite de ce mariage et se disputa même avec le grand maître Bodhi, avant de se séparer en mauvais termes et de redescendre dans le monde des mortels.

J'ai compté le temps, cette fois-ci, le vol, Ling Feng s'est réincarné dans une secte de culture, et la femme principale est sa disciple personnelle. Il n'est pas retourné dans le monde immortel immédiatement après la calamité, mais est resté sur terre pendant quelques décennies et a attendu que la femme principale, Qian Yue, réussisse à s'élever avant qu'ils ne reviennent ensemble.

À l'origine, la propriétaire avait un bon sentiment pour Ling Feng en tant que disciple, mais lorsqu'elle découvrit que les sentiments de Ling Feng pour Qian Yue dépassaient le cadre du maître et du disciple, elle commença à devenir folle et à essayer de trouver des moyens de les faire rompre.

Finalement, elle ne put s'empêcher d'être jalouse et poussa Qian Yue hors du Stade d'Exorcisme Immortel, faisant presque voler les âmes des gens. Une fois la vérité révélée, elle fut expulsée du Royaume Immortel et tuée par Ling Feng lui-même, et son âme fut dispersée.

Cette idée me donne un terrible mal de tête. Je ne veux pas rencontrer quelqu'un qui va me tabasser plus tard.

Mais pour ne pas perdre ma personnalité, j'ai quand même été entraîné par Lili au palais Lingfeng pour le banquet.

Le palais de Lingfeng était construit à côté de la vallée des pêchers en fleurs, et c'était le bon moment pour profiter des fleurs. J'ai passé mon visage pour franchir les portes du palais et j'ai quitté le banquet en un clin d'œil. En passant devant le débit de boissons, j'ai déposé un autel d'infusion de fleurs de pêcher et j'ai couru jusqu'à la vallée des fleurs de pêcher pour boire et profiter des fleurs.

Le Peach Blossom Brew vaut vraiment son nom, il est bon à boire, mais l'arrière-goût est fort. Je me suis endormi en un rien de temps et j'ai trouvé un arbre pour m'allonger et loucher un moment.

J'ai pensé que c'était Ri Ri qui me cherchait, alors j'ai sorti la tête de l'arbre et je me suis préparée à me faire dorloter. Mais ce n'est pas Ri Ri qui est venue, c'est l'héroïne Chiyuki.

Qian Yue ne s'attendait manifestement pas à ce quelqu'un et s'est figée, me regardant avec des taches de larmes encore accrochées au visage. C'est alors que je me suis souvenu de l'intrigue du roman où l'héroïne avait été ridiculisée pour son apparence lors de son arrivée dans le monde des immortels et s'était enfuie en pleurant.

Lol, c'est puéril de se moquer de l'apparence quand on est immortel depuis des milliers et des milliers d'années.

En tant que Lotus Blanc qualifié, ah non, Lotus Blanc Immortel Supérieur, comment pouvais-je ne pas me soucier de voir une jolie fille se faire malmener et pleurer ? J'ai claqué des doigts et invoqué les démons-fleurs, les faisant danser autour de Chiyuki. Comment Chiyue a-t-elle pu assister à cette bataille ? Son visage est devenu instantanément rouge.

Elle m'a regardé avec circonspection et je lui ai souri. J'ai entendu RiRi m'appeler au loin et j'ai fait signe à un nuage de rentrer à la maison avec RiRi.

Quelques jours plus tard, ma belle-mère est venue me rendre visite.

"Fils, as-tu vu Ling Feng ?" L'Impératrice Céleste sourit extraordinairement gentiment.

"Ah... Non." Je me suis éclipsé tôt et je n'ai vu personne.

"Cette fois-ci, il est revenu de la calamité, sa culture a encore fait de grands progrès, ton père a dit qu'il avait un brillant avenir, toi et lui..."

Gotta, c'est la ruée vers le mariage.

1. téléchargez votre travail

2. les lecteurs de l'éditorial

Il segmente et reconnaît automatiquement le lecteur lorsqu'il est importé, mais c'est une véritable plaie d'éditer de cette manière. De plus, le navigateur est lent.

Voici une astuce, parce que nous voulons produire rapidement des lots, le roman n'a besoin que d'une personne pour lire à haute voix le narrateur, et le logiciel reconnaît automatiquement comme un multi-lecteur, l'édition est très lourde, nous pouvons simplement coller dans la zone du roman entrer une phrase "111", et ensuite entrer dans l'interface d'édition, de sorte que vous pouvez remplacer la zone de narration dans le 111 pour l'ensemble ! Le contenu du roman.

L'inconvénient est qu'il ne reconnaît pas très bien les mots polysyllabiques. Notez que l'image ci-dessus reconnaît automatiquement les mots polysyllabiques pour vous.

Il existe en fait une autre solution d'importation de modèles qui fonctionne parfaitement, explorez-la par vous-même, l'outil vous est déjà fourni...

2. sélectionner le haut-parleur et obtenir le son synthétisé, le processus n'est pas montré.

Selon le style des romans dont le personnage principal est une femme, le renversement et le croisement, nous choisissons une voix impériale calme d'âge moyen, la vitesse d'élocution ne doit pas être trop rapide, 1,3 est plus approprié, et le ton de la voix est élevé.

3. utiliser la silhouette pour obtenir le fichier audio SRT

La procédure n'est pas démontrée, les sous-titres sont reconnus après le téléchargement de l'audio, la seule chose à noter ici est de sélectionner "Text Match".

Nous avons ici l'audio et le fichier SRT correspondant.

Revenons au processus vidéo composite...

Vidéo sur les nouvelles synthèses

La vidéo composite repose toujours sur un logiciel qui fait correspondre la synchronisation de la lecture du sous-titre du roman avec la synchronisation de la commutation de l'image, puis compose l'ensemble.

Qu'en est-il du son ? Ne vous inquiétez pas, grâce aux sous-titres et aux temps de commutation de l'image correspondants, le son est synthétisé dans l'image à tout moment. Suivez le flux de l'outil pendant que je fais une démonstration...

1. sélectionner l'ébauche de découpe à générer

2. choisir de télécharger des sous-titres SRT

3. sélectionner les effets (effets de commutation d'écran), puis cliquer sur l'ébauche de composition.

4. ouvrez le découpage, vous verrez le brouillon, ouvrez-le...

5. importer de l'audio

A ce stade, nous avons obtenu la vidéo complète, l'effet est encore presque parfait, la dernière partie nous permet d'embellir la vidéo suivante. Je ne suis pas familier avec l'édition vidéo, regardez simplement l'effet.

Vidéo raffinée secondaire

1. réglage du rapport d'écran

En général, le format 4:3 convient, mais ici, je fais délibérément des gros plans verticaux de personnes réelles, et j'utilise donc le format 9:16.

2. choisir un arrière-plan pour étoffer l'image

3. insérer des images clés ou des effets spéciaux pour rendre les images statiques plus dynamiques

4. insérer le couvercle de commercialisation

En général, ces bandes dessinées ne conviennent pas à ce type de BD sur l'IA ; elles conviennent mieux à la diffusion en boucle d'une vidéo de lavage de cerveau, suivie de la lecture des romans.

6. ajouter des BGM... C'est encore plus de lavage de cerveau.

Mettez la musique en boucle et baissez d'un ton.

7. pas assez... Pour le trafic, nous devons ajouter une couverture qui va de soi.

Cette méthode convient parfaitement aux pièces de théâtre courtes, aux articles courts, aux feuilletons de romans.

Enfin, il convient de présenter certaines des ressources qui seront utilisées tout au long du processus.

Modèle de peinture AI
Lien : https://pan.baidu.com/s/1HRf_JPtLPcwRBRZnLMs2lg?pwd=40hj

Musique de fond pour la narration d'un manga 1000 chansons
Lien : https://pan.baidu.com/s/1RfW-PAkAe3Y6-vgkz8fT8A?pwd=4n3u

Didacticiel SD

Primaire : https://pan.baidu.com/s/1uId2ZdWD4qLRgLdjdUTnpQ?pwd=qri1

Avancé : https://pan.baidu.com/s/1Xnsi_NCexPph1-75gG-QfQ?pwd=3qbu

0 Pratique de base de la peinture : https://pan.baidu.com/s/1KUHkB9gcfI18KjD6wLkwrg?pwd=r6z2

Liste de plus de 2000 mots clés : https://pan.baidu.com/s/1VP_tgBwiJ1LkPeynBy3FvQ?pwd=1cia

Logiciel utilisé dans la présentation (sans enjeu, à utiliser avec précaution) : https://tiger.easyartx.com/landing

Il y a encore quelques ressources... De quoi avez-vous encore besoin ?

Démystifier l'IA Série d'articles en bandes dessinées Table des matières

1. Démystifier les vidéos d'explication comiques sur l'IA, du principe à la pratique (Principes)
2. Démystifier les vidéos d'explication comiques sur l'IA, du principe à la pratique (chapitre sur les chaînes de la sous-commission)
3. Démystifier l'IA La narration vidéo en bande dessinée, du principe à la pratique (Acquérir et réécrire la fiction)
4. Démystifier la narration d'une bande dessinée par l'IA : du principe à la pratique (Making Novel Scripts)
5. Démystifier l'IA Manga Narration Vidéo du principe à la pratique (Vidéo composite)