Demystifying AI Manga Narration Video from Principle to Practice (Vídeo compuesto)

Vídeo compuesto de ficción, que funciona en cuatro partes:

1. Las novelas generan imágenes
2. Novel Generation Audio
3. Nuevo vídeo de síntesis
4. Vídeo refinado secundario

Hemos aprendido de nuestra enseñanza anteriorDemystifying AI Comic Book Narration Video from Principle to Practice (Cómo hacer guiones de novelas)Al final, obtenemos un EXCEL cosido, por favor descárguelo o genérelo usted mismo según el tutorial.

Veamos primero el producto acabado

Seguiré el procedimiento del software que utilizo para demostrar el proceso. (Las herramientas no son importantes y, de nuevo, no se recomienda ningún software de pago).

Las novelas generan imágenes

1. Empezar a crear

2. Antes de crear una novela, prueba y depura primero el entorno de mapeo

Asegúrese de que la depuración siguiente está bien y, a continuación, haga clic en "Crear proyecto".

3. Cree el primer paso del proyecto, elija importar el archivo de guión

4. Seleccione el EXCEL previamente guardado (no puede encontrar a su vez sobre el artículo anterior)

5. Compruebe el archivo de importación, ya que todo el texto ha sido procesado en EXCEL, ¡en este paso no es necesario ajustar nada!

¡6. Preocupado por el "papel establecido" en la esquina superior derecha, que todavía puede ser modificado dos veces, unido a otro estilo LoRA!

Como ya he depurado el estilo localmente en SD antes de importar el archivo, no lo modificaré aquí.

Después de guardar, vaya al siguiente paso y pasemos a generar imágenes.

7. Entra en la interfaz de generación de imágenes, no hagas clic en "empezar a generar imágenes", ¡vuelve a comprobar la configuración!

8. Algunas de mis configuraciones

No entré en detalles sobre mi configuración en el paso 2, así que simplemente enumeraré los elementos principales aquí:

• Modelo: Ouka - National Style
• vae: vae-ft-mse-840000-ema-pruned
• Preajuste frontal: (mejor calidad, 4k, 8k, highres, obra maestra:1.2),(ultradetallado),obra maestra,(obra maestra, calidad superior, mejor calidad),
• Negativo: no aparece, las palabras se violan fácilmente, se copian al azar
• Algoritmo de amplificación: R-ESRGAN 4x+
• Tamaño de la imagen: larga (Mapa largo tendrá todo tipo de un problema, muchos modelos sugieren generar un mapa cuadrado, 512 * 512 puede ser)

En la figura anterior, cualquier lente, la lista de la derecha del botón "Ajustar parámetros", haga clic en la lente actual puede entrar en los parámetros detallados de la página de configuración.

Pruebe a generar imágenes para uno o dos objetivos, si le parece bien, y empiece a generar imágenes en masa.

9. Generar imágenes por lotes

Hasta la posición actual, 37 cartas, 3060 tarjetas, tardó unos 3 minutos.

Lo más destacado: la instalación de la extensión Tensorrt y la generación del modelo ONNX pueden reducirse teóricamente a 2 minutos.

10. Zoom sin pérdidas con un solo clic

Debido a que la generación por defecto es una imagen de tamaño pequeño (la velocidad de generación es rápida y conveniente para ajustarla), si estas imágenes están básicamente en línea con los requisitos, no es necesario reparar (aquí no reparo), haga clic en la ampliación no destructiva.

En este punto tenemos un conjunto de imágenes, puede iniciar automáticamente la síntesis de vídeo, he demostrado las herramientas para el seguimiento de la síntesis de voz, proceso de vídeo en el software tienen, pero he demostrado el uso de herramientas de generación de audio de tres vías aquí, leer en voz alta mejor.

Estas fotos van aquí primero... Primero, arreglaremos la lectura de la novela.

Novel Generation Audio

Aquí no uso las soluciones comunes de Microsoft, o Tease. A fin de cuentas es mejor ir con el libre pero con vocales más realistas recorte de sonido .

Guardamos la siguiente novela y pasamos al recorte de sonido para iniciar el proceso...

Estoy vestida de hada.

No el hada de la leyenda mortal, sino la verdadera que vuela por el cielo. El Emperador del Cielo es mi padre, y la Reina del Cielo es mi madre, así que nací hada, de piel blanca y largas piernas, y llena de espíritu de hada.

Los días de un hada son sencillamente demasiado cómodos. Colocarse, leer libros y jugar con las pequeñas hadas todo el día en su propio palacio de hadas es alucinante.

Desgraciadamente, los buenos tiempos no duraron mucho antes de que ocurriera algo.

Esa tarde, la pequeña hada sirviente de mi palacio, Li Li, vino corriendo con gran prisa, "¡Loto Blanco Supremo Inmortal! ¡Loto Blanco!"

"Escucha, escucha, deja de gritar". Aunque hace meses que lo crucé, aún no me acostumbro al nombre.

"El Inmortal Lingfeng ha regresado de su descenso al mundo mortal para cruzar la tribulación, vayamos a visitarlo".

"¿Quién es el Inmortal Supremo Lingfeng?"

"¡Supremo Inmortal tienes sueño, ese es tu prometido!"

"¿Eh?"

Fue entonces cuando recordé que parece que tengo un prometido. ¿Por qué me suena tanto el nombre de Ling Feng, que es exactamente el mismo que el del héroe de la novela que leí antes de cruzar al otro lado?

Después de algunas indagaciones, finalmente descubrí la situación: yo, Loto Blanco, soy la contraparte femenina en este texto abusivo.

El personaje principal, Ling Feng, es un inmortal superior en el mundo inmortal, alcanzando la posición de inmortal superior en 20.000 años, un talento poco común en el mundo inmortal. Aunque yo también soy un Inmortal Superior, a diferencia de él, que confió en sus propias habilidades para cultivarse, yo soy un Inmortal de Segunda Generación, nacido como Inmortal Superior.

Mi padre, el Emperador Celestial, vio el talento de Ling Feng y, a instancias mías, congenió con el maestro de Ling Feng, el Ancestro Bodhi, y organizó un matrimonio entre los dos.

Pero Lingfeng no estaba satisfecha en absoluto con el matrimonio, e incluso tuvo una gran pelea con el ancestro Bodhi, y finalmente se separaron en malos términos, dando media vuelta y bajando al mundo mortal para experimentar la calamidad.

Conté el tiempo, esta vez, el robo, Ling Feng se reencarnó en una secta de cultivo, y la protagonista femenina es su discípula personal. No volvió al mundo inmortal inmediatamente después de la calamidad, sino que se quedó en la tierra unas décadas más y esperó a que la heroína, Qian Yue, lograra ascender antes de volver juntos.

La propietaria original original también sentía algo por Ling Feng como discípulo, pero cuando descubrió que los sentimientos de Ling Feng por Qian Yue eran algo más que maestro y discípulo, empezó a enloquecer con su deseo de muerte, tratando de encontrar la forma de separarlos.

Al final no pudo evitar estar celosa y empujó a Qian Yue fuera de la Etapa de Exorcismo Inmortal, casi haciendo volar las almas de la gente. Después de que la verdad saliera a la luz, fue expulsada del Reino Inmortal y también fue asesinada por el propio Ling Feng y su alma se dispersó.

Pensar en ello me dio un terrible dolor de cabeza. No quiero conocer a alguien que luego me va a dar una paliza.

Pero para no derrumbar mi persona, Lili me arrastró al palacio Lingfeng para el banquete.

El palacio de Lingfeng estaba construido junto al Valle de la Flor del Melocotón, y era un buen momento para disfrutar de las flores. Me limpié la cara para entrar por las puertas del palacio y me escabullí del banquete en un abrir y cerrar de ojos. Al pasar junto a la licorería, alisé un altar de Brebaje de Flor de Melocotón y corrí al Valle de las Flores de Melocotón para beber y disfrutar de las flores.

El Peach Blossom Brew realmente merece su nombre, es bueno de beber, es el regusto fuerte. Me entró sueño enseguida y busqué un árbol para tumbarme y entrecerrar los ojos un rato.

Aturdida, oí un movimiento, pensé que era Ri Ri buscándome, así que asomé la cabeza por el árbol y me dispuse a mimarme. Pero no era Ri Ri quien venía, sino la heroína Chiyuki.

Obviamente, Qian Yue no se esperaba a ese alguien y se quedó inmóvil, mirándome con las lágrimas aún colgando de su rostro. Fue entonces cuando recordé la trama escrita en la novela, en la que la heroína era ridiculizada por su aspecto cuando llegaba por primera vez al mundo inmortal y salía corriendo llorando.

Lol, es infantil burlarse de las miradas cuando eres miles y miles de años inmortal.

Como Loto Blanco cualificado, ah no, Loto Blanco Inmortal Superior, ¿cómo podía no preocuparme cuando veía a una chica mona siendo acosada y llorando? Chasqueé los dedos e invoqué a los demonios florales, haciéndolos bailar alrededor de Chiyuki. Cómo había visto Chiyue esta batalla, su cara se puso roja al instante.

Me miró con cautela y yo le sonreí, oyendo que RiRi me llamaba a lo lejos, así que le hice señas a una nube para que se fuera a casa con RiRi.

A los pocos días, mi madrastra vino a visitarme.

"Hijo, ¿has visto a Ling Feng?" La Emperatriz Celestial sonrió con extraordinaria amabilidad.

"Ah... No." Me escabullí pronto y no vi a nadie en absoluto.

"Esta vez volvió de la calamidad, su cultivo ha vuelto a progresar mucho, tu padre dijo que tiene un futuro brillante, tú y él...".

Tengo prisa por casarme.

1.Sube tu trabajo

2. Editorial lectores

Segmenta y reconoce automáticamente el lector al importarlo, pero es un verdadero coñazo editarlo así. Y hace que el navegador se retrase.

¡He aquí un truco, porque queremos rápidamente la producción por lotes, la novela sólo necesita una persona para leer en voz alta el narrador, y el software reconocido automáticamente como un lector múltiple, la edición es muy engorroso, sólo podemos pegar en el área de la novela entrar en una frase "111", y luego entrar en la interfaz de edición, de modo que usted puede reemplazar el área de narración en el 111 para el completo! El contenido de la novela.

El inconveniente es que no reconoce muy bien las palabras polisílabas, ten en cuenta que la imagen de arriba reconoce automáticamente las palabras polisílabas por ti.

En realidad hay otra solución de importación de plantillas que funciona perfectamente, explórala por tu cuenta, la herramienta ya te la damos...

2. Selecciona el altavoz y obtén el audio sintetizado, no se muestra el proceso.

De acuerdo con el estilo de las novelas con protagonista femenina, inversión y cruce, elegimos de mediana edad tranquila voz imperial, la velocidad del discurso no debe ser demasiado rápido, 1,3 es más apropiado, y el tono de voz se eleva.

3. Utiliza silhouette para obtener el archivo SRT de audio

El procedimiento no está demostrado, los subtítulos se reconocen después de cargar el audio, lo único que hay que tener en cuenta aquí es: seleccionar "Coincidencia de texto".

Aquí tenemos el audio y el archivo SRT correspondiente.

De vuelta al proceso de vídeo compuesto...

Nuevo vídeo de síntesis

El vídeo compuesto sigue dependiendo de un programa informático que hace coincidir el momento en que se lee el texto de los subtítulos de la novela con el momento en que se cambia de imagen y, a continuación, lo combina.

¿Y el sonido? No te preocupes, con los subtítulos y los tiempos de conmutación de imagen correspondientes, el sonido se sintetiza en la imagen en cualquier momento. Sigue el flujo de la herramienta mientras te hago una demostración...

1. Seleccione el boceto que desea generar

2. Elija cargar subtítulos SRT

3. Seleccione los efectos (efectos de cambio de pantalla) y, a continuación, haga clic en el borrador de composición

4. Abre el recorte, verás el borrador, ábrelo...

5. Importar audio

Por este punto han conseguido el vídeo completo, el efecto es todavía casi, la última parte vamos a embellecer el vídeo siguiente. No estoy familiarizado con la edición de vídeo, basta con ver el efecto.

Vídeo refinado secundario

1. Ajuste de la relación de pantalla

Generalmente 4:3 está bien, aquí hago a propósito primeros planos verticales de gente real, así que uso 9:16

2. Elige un relleno de fondo para dar cuerpo a la imagen

3. Inserta algunos fotogramas clave o efectos especiales para que las imágenes estáticas parezcan más dinámicas

4. Insertar la cubierta de comercialización

Generalmente no es adecuado para este tipo de historietas de IA, más adecuado para hacer un bucle con un vídeo emergente de lavado de cerebro y luego reproducir las novelas

6. añadir algo de BGM... Es más lavado de cerebro.

Pon música de fondo. No hagas ruido.

7. no es suficiente... Para el tráfico, tenemos que añadir una cubierta de no-brainer.

Este método es muy adecuado para obras cortas, artículos cortos, hacer novelas por entregas también puede probar este método, puede absorber el volumen, la caída de peso.

Por último: Empaquetar algunos de los recursos que se utilizarán a lo largo del proceso.

Modelo de pintura AI
Enlace: https://pan.baidu.com/s/1HRf_JPtLPcwRBRZnLMs2lg?pwd=40hj

Narración manga música de fondo 1000 canciones
Enlace: https://pan.baidu.com/s/1RfW-PAkAe3Y6-vgkz8fT8A?pwd=4n3u

Tutorial SD

Principal: https://pan.baidu.com/s/1uId2ZdWD4qLRgLdjdUTnpQ?pwd=qri1

Avanzado: https://pan.baidu.com/s/1Xnsi_NCexPph1-75gG-QfQ?pwd=3qbu

0 Prácticas básicas de pintura: https://pan.baidu.com/s/1KUHkB9gcfI18KjD6wLkwrg?pwd=r6z2

Lista de más de 2000 palabras clave: https://pan.baidu.com/s/1VP_tgBwiJ1LkPeynBy3FvQ?pwd=1cia

Programas informáticos utilizados en la presentación (sin participación, utilícelos con precaución): https://tiger.easyartx.com/landing

Hay algunos recursos más... ¿Qué más necesita?

Desmitificar la IA Serie de cómics Índice de artículos

1. Demystifying AI Comic Explainer Videos from Principle to Practice (Principios)
2. Demystifying AI Comic Explainer Videos from Principle to Practice (Capítulo de la Subcomisión Canales)
3. Demystifying AI Comic Book Narration Video from Principle to Practice (Adquisición y reescritura de ficción)
4. Demystifying AI Comic Book Narration Video from Principle to Practice (Cómo hacer guiones de novelas)
5. Demystifying AI Manga Narration Video from Principle to Practice (Vídeo compuesto)