Metaverse AI: versión de código abierto de una herramienta de clonación humana digital y generación de vídeos cortos con IA

Introducción general

Metaverse AI (versión de código abierto) es un proyecto alojado en GitHub, desarrollado por el equipo libn-net. Puede clonar imágenes y voces humanas digitales mediante tecnología de IA para generar vídeos cortos, y también admite doblaje y subtitulación. La herramienta está disponible como instalador para Windows, versión web, versión H5 y versión applet, lo que la hace adecuada para proyectos paralelos individuales o pequeños equipos. El desarrollador es un programador desempleado de 35 años de edad, debido a la auto-construido equipo de vídeo de corta duración invertido millones de dólares, pero poco retorno, se volvió a desarrollar este proyecto de código abierto con los amigos, con el objetivo de reducir el costo de la creación de marketing. Actualmente las funciones básicas disponibles, en vivo y otras partes de la función está todavía en desarrollo.

Lista de funciones

• Clonación de imágenes: cargue fotos o vídeos y entrénese para generar una persona digital personalizada con IA.
• Clon de sonido: graba o carga audio para generar un sonido de IA exclusivo.
• Generación de vídeo: admite copia personalizada, voz en off, música de fondo y subtítulos para exportar vídeos cortos.
• Publicación de vídeos cortos: se pueden publicar directamente en Jittery, Shutterbug y otras plataformas.
• Doblaje AI: ajusta la velocidad y el volumen del habla, admite voz privada o pública.
• Subtítulos AI: Personaliza fuentes, tamaños y colores para generar subtítulos automáticamente.
• Función de emisión en directo (en desarrollo): admite texto en tiempo real y emisión automática hacia arriba y hacia abajo.
• Contenido gráfico (en desarrollo): genera artículos de marketing o viñetas.

Utilizar la ayuda

MetaWorld AI (versión de código abierto) es una potente herramienta. Para utilizarla, es necesario instalar o acceder primero a la versión correspondiente. A continuación se detallan los pasos e instrucciones que le ayudarán a empezar rápidamente.

Proceso de instalación

Hay varias versiones de MetaWorld AI (Open Source Edition) disponibles, aquí está la versión de instalación de Windows como un ejemplo para ilustrar los pasos de instalación.

1. Visite la página de GitHub
   Abre tu navegador y escribe https://github.com/libn-net/marketing_creator_pro_max_pc para llegar a la página principal de la versión de código abierto de MetaWorld AI. En la página hay código e instrucciones básicas.
2. Descargar código fuente
   Haga clic en el color verde de la esquina superior derecha Code y selecciona "Descargar ZIP". Una vez finalizada la descarga, descomprímelo en una carpeta local, como tu escritorio.
3. Comprobación del entorno de dependencia
   Abra la carpeta descomprimida para ver si el archivo README.md o las instrucciones de instalación. Al tratarse de una herramienta de IA, puede requerir un entorno Python:
   • Si no tiene Python, vaya a https://www.python.org para descargar la última versión (se recomienda la 3.9 o superior) y marque la casilla "Add to PATH" (Añadir a la ruta) al instalar.
   • Abra la línea de comandos (los usuarios de Windows deben pulsar Win + R e introducir cmd), vaya a la carpeta descomprimir:

     cd Desktop\marketing_creator_pro_max_pc-main
     

   • Si hay requirements.txtejecute el siguiente comando para instalar la dependencia:

     pip install -r requirements.txt
     

4. programa de carrera
   Localice el archivo de inicio (p. ej. main.py), introdúzcalo en la línea de comandos:

python main.py

Si la ejecución tiene éxito, aparecerá la interfaz del operador o prompt. Si falla, compruebe si la dependencia está completa.

5. Instalación de otras versiones

• Versión web: Acceda al enlace proporcionado por el proyecto (si existe) sin instalación local.
• Versión H5/Small App: Consulta https://github.com/libn-net/marketing_creator_pro_max_uni y sigue las instrucciones para descargarlo y ejecutarlo.
• API de backendPara desarrollos a medida, descargue https://github.com/libn-net/marketing_creator_pro_max_backend.

Funciones principales

A continuación se explica cómo utilizar las funciones básicas de MetaWorld AI (versión de código abierto).

1. Clonación de imágenes

• procedimiento::
  Tras iniciar el programa, entra en el módulo "Clonación de imágenes". Haz clic en "Cargar" y elige una foto o un vídeo nítido de tu rostro. Haz clic en "Entrenar" y espera unos minutos a que se genere la imagen humana digital de la IA. Cuando termine, podrás verla en "Lista".
• punto::
  Las fotos deben estar de frente y sin obstáculos, y el tiempo de formación depende del rendimiento del ordenador, normalmente entre unos minutos y media hora.

2. Clonación del sonido

• procedimiento::
  Abra el módulo "Clonar sonido". Haga clic en "Grabar" para grabar de 1 a 3 minutos de audio o cargue un archivo de audio existente. Haz clic en "Entrenar" para generar un clon de sonido. Cuando haya terminado, selecciónelo en la "Lista".
• punto::
  Las grabaciones deben estar libres de ruido de fondo y ser compatibles con los formatos MP3 o WAV.

3. Generación de vídeo

• procedimiento::
  Vaya al módulo "Generación de vídeo":
• redactorHaga clic en "Generar copia", introduzca palabras clave (por ejemplo, "lanzamiento de un nuevo producto") o enlaces Jitterbug, y haga clic en "Imitación" para generar el texto.
• personaje (en una obra de teatro, novela, etc.)Elija una imagen entre "Persona digital AI privada" o "Persona digital AI pública".
• doblaje (cinematografía): Selecciona la voz clonada, ajusta la velocidad y el volumen del habla y genera una locución.
• música de fondo (BGM): Sube audio o utiliza material público y ajusta el volumen.
• subtítulos: Active la "Generación de subtítulos" y seleccione la fuente, el tamaño y el color.
• derivarAjusta la resolución (por ejemplo, 1080p) y el formato (por ejemplo, MP4) y haz clic en "Generar vídeo".
• punto::
  La copia puede modificarse manualmente. Puede previsualizar antes de exportar para confirmar el efecto.

4. Lanzamientos de vídeos cortos

• procedimiento::
  Después de generar el vídeo, haz clic en "Publicar" y selecciona la plataforma (por ejemplo, Shutterstock). Introduce la información de tu cuenta, súbelo y publícalo.
• punto::
  Debe iniciar sesión previamente en su cuenta de la plataforma, lo que puede requerir un código de verificación.

advertencia

• Las funciones de transmisión en directo y gráficos se encuentran en una fase baja de desarrollo (20% y 10%) y no están disponibles en este momento.
• Los proyectos de código abierto pueden tener errores, y puedes informar de ellos en la página "Problemas" de GitHub.
• El desarrollador da prioridad a responder preguntas de veteranos, desempleados y madres, otros usuarios pueden tardar un poco más en responder.

escenario de aplicación

1. Side Hustle personal Creación de vídeos cortos
   Los usuarios clonan sus propias imágenes y voces para generar vídeos de promoción de productos y los publican en Jitterbug para obtener ingresos por tráfico.
2. Marketing para pequeñas empresas
   Los propietarios de tiendas utilizan Yuanworld AI para generar vídeos publicitarios que muestren las características de los productos y atraigan a los clientes online.
3. Producción de contenidos educativos
   Los profesores utilizan la herramienta para clonar imágenes, generar vídeos instructivos cortos y publicarlos en el número de vídeo para compartir sus lecciones.

CONTROL DE CALIDAD

1. ¿Es gratis MetaWorld AI?
   Sí, la versión de código abierto es completamente gratuita y los usuarios pueden descargar el código para su propio uso o modificación.
2. ¿Necesita conocimientos de programación?
   No necesariamente. Los usuarios normales pueden ejecutarlo directamente, si necesita instalar o ajustar el código, es mejor saber programar.
3. ¿Admite contenidos chinos?
   Soporte. La interfaz y los contenidos generados están disponibles en chino, ideal para usuarios chinos.