Metaverse AI: versão de código aberto da ferramenta de geração de vídeos curtos e clonagem digital de humanos por IA

Introdução geral

O Metaverse AI (versão de código aberto) é um projeto hospedado no GitHub, desenvolvido pela equipe da libn-net. Ele pode clonar imagens e vozes humanas digitais por meio da tecnologia de IA para gerar vídeos curtos e também suporta dublagem e legendagem. A ferramenta está disponível como um instalador do Windows, uma versão da Web, uma versão H5 e uma versão de miniaplicativo, o que a torna adequada para projetos paralelos individuais ou pequenas equipes. O desenvolvedor é um programador desempregado de 35 anos de idade, que, por causa da equipe de vídeos curtos autoconstruídos, investiu milhões de dólares, mas teve pouco retorno, e decidiu desenvolver esse projeto de código aberto com amigos, com o objetivo de reduzir o custo da criação de marketing. Atualmente, as funções principais estão disponíveis, e outras partes da função ao vivo ainda estão em desenvolvimento.

Lista de funções

• Clonagem de imagens: faça upload de fotos ou vídeos e treine para gerar uma pessoa digital com IA personalizada.
• Sound Clone: Grave ou carregue áudio para gerar um som exclusivo de IA.
• Geração de vídeo: suporta cópia personalizada, narração, música de fundo e legendas para exportar vídeos curtos.
• Lançamento de vídeo curto: pode ser lançado diretamente no Jittery, Shutterbug e outras plataformas.
• Dublagem com IA: ajuste a velocidade e o volume da fala, suporte a voz privada ou pública.
• Legendas AI: personalize fontes, tamanhos e cores para gerar legendas automaticamente.
• Função de transmissão ao vivo (em desenvolvimento): suporta texto em tempo real e transmissão automática para cima e para baixo.
• Conteúdo gráfico (em desenvolvimento): gera artigos de marketing ou desenhos animados.

Usando a Ajuda

O MetaWorld AI (versão de código aberto) é uma ferramenta poderosa. Para usá-la, primeiro é necessário instalar ou acessar a versão correspondente. Abaixo estão as etapas e instruções detalhadas para ajudá-lo a começar rapidamente.

Processo de instalação

Há várias versões do MetaWorld AI (Open Source Edition) disponíveis; aqui está a versão de instalação do Windows como exemplo para ilustrar as etapas de instalação.

1. Visite a página do GitHub
   Abra seu navegador e digite https://github.com/libn-net/marketing_creator_pro_max_pc para acessar a página inicial da versão de código aberto do MetaWorld AI. Há código e instruções básicas na página.
2. Download do código-fonte
   Clique na cor verde no canto superior direito Código e selecione "Download ZIP". Quando o download estiver concluído, descompacte-o em uma pasta local, como a área de trabalho.
3. Verificação do ambiente de dependência
   Abra a pasta descompactada para ver se o arquivo README.md ou instruções de instalação. Como se trata de uma ferramenta de IA, pode ser necessário um ambiente Python:
   • Se você não tiver o Python, acesse https://www.python.org para fazer o download da versão mais recente (recomenda-se a versão 3.9 ou superior) e marque a caixa "Add to PATH" ao instalar.
   • Abra a linha de comando (usuários do Windows pressionam Win + R e digitam cmd), vá para a pasta Unzip:

     cd Desktop\marketing_creator_pro_max_pc-main
     

   • Se houver requisitos.txtExecute o seguinte comando para instalar a dependência:

     pip install -r requirements.txt
     

4. programa de corrida
   Localize o arquivo de inicialização (por exemplo main.py), digite-o na linha de comando:

python main.py

Quando a execução for bem-sucedida, a interface ou o prompt do operador será exibido. Se houver falha, verifique se a dependência está completa.

5. Instalação de outras versões

• Versão da WebAcesso ao link fornecido pelo projeto (se houver) sem instalação local.
• Versão do aplicativo H5/SmallConsulte o site https://github.com/libn-net/marketing_creator_pro_max_uni e siga as instruções para fazer o download e executá-lo.
• API de back-endPara desenvolvimento personalizado, faça o download do site https://github.com/libn-net/marketing_creator_pro_max_backend.

Funções principais

Veja como usar os principais recursos do MetaWorld AI (versão de código aberto).

1. clonagem de imagens

• procedimento::
  Depois de iniciar o programa, entre no módulo "Image Cloning" (Clonagem de imagens). Clique em "Upload" e escolha uma foto ou um vídeo nítido de seu rosto. Clique em "Train" (Treinar) e aguarde alguns minutos para gerar a imagem humana digital da IA. Quando terminar, você poderá visualizá-la em "List" (Lista).
• ponto::
  As fotos precisam estar voltadas para a frente e desobstruídas, e o tempo de treinamento depende do desempenho do computador, geralmente de alguns minutos a meia hora.

2. clonagem de som

• procedimento::
  Abra o módulo "Sound Clone". Clique em "Record" (Gravar) para gravar de 1 a 3 minutos de áudio ou carregue um arquivo de áudio existente. Clique em "Train" (Treinar) para gerar um clone de som. Quando terminar, selecione-o na "Lista".
• ponto::
  As gravações não devem ter ruído de fundo e devem ser compatíveis com o formato MP3 ou WAV.

3. geração de vídeo

• procedimento::
  Vá para o módulo "Video Generation" (Geração de vídeo):
• redatorClique em "Generate Copy" (Gerar cópia), insira palavras-chave (por exemplo, "lançamento de novo produto") ou links do Jitterbug e clique em "Imitation" (Imitação) para gerar o texto.
• personagem (em uma peça de teatro, romance etc.)Escolha uma imagem em "Private AI Digital Person" ou "Public AI Digital Person".
• dublagem (produção de filmes)Voz clonada: selecione a voz clonada, ajuste a velocidade e o volume da fala e gere uma narração.
• Música de fundo (BGM): Faça upload de áudio ou use material público e ajuste o volume.
• legendasAtivar "Subtitle Generation" (Geração de legendas) e selecionar fonte, tamanho e cor.
• derivarDefina a resolução (por exemplo, 1080p) e o formato (por exemplo, MP4) e clique em "Generate Video" (Gerar vídeo).
• ponto::
  A cópia pode ser modificada manualmente. Você pode visualizar antes de exportar para confirmar o efeito.

4. lançamentos de vídeos curtos

• procedimento::
  Depois de gerar o vídeo, clique em "Publish" (Publicar) e selecione a plataforma (por exemplo, Shutterstock). Insira as informações de sua conta, faça o upload e publique.
• ponto::
  Você precisa fazer login na sua conta da plataforma com antecedência, o que pode exigir um código de verificação.

advertência

• Os recursos de transmissão ao vivo e gráficos estão em um estágio baixo de desenvolvimento (20% e 10%) e não estão disponíveis no momento.
• Os projetos de código aberto podem ter bugs, e você pode relatar problemas na página "Issues" do GitHub.
• O desenvolvedor prioriza a resposta a perguntas de veteranos, desempregados e mães; outros usuários podem demorar um pouco mais para responder.

cenário do aplicativo

1. Criação de vídeos curtos para trabalho paralelo pessoal
   Os usuários clonam suas próprias imagens e vozes para gerar vídeos de promoção de produtos e publicá-los no Jitterbug para obter receita de tráfego.
2. Marketing para pequenas empresas
   Os proprietários de lojas usam a IA da Yuanworld para gerar vídeos publicitários para mostrar os recursos dos produtos e atrair clientes on-line.
3. Produção de conteúdo educacional
   Os professores usam a ferramenta para clonar imagens, gerar vídeos instrutivos curtos e publicá-los no número do vídeo para compartilhar suas lições.

QA

1. A IA do MetaWorld é gratuita?
   Sim, a versão de código aberto é totalmente gratuita e os usuários podem baixar o código para uso próprio ou modificação.
2. É necessário ter conhecimento de programação?
   Não necessariamente. Os usuários normais podem executá-lo diretamente; se for necessário instalar ou ajustar o código, é melhor saber programar.
3. Ele é compatível com conteúdo chinês?
   Suporte. A interface e o conteúdo gerado estão disponíveis em chinês, ideal para usuários chineses.