AI2SRT : Création de courtes vidéos narrées ou de résumés vidéo pour de longues vidéos en un clic à l'aide des modèles Gemini

Introduction générale

AI2SRT est un projet open source qui utilise le Big Model de GeminiAI pour générer en un clic de courtes vidéos narrées et des résumés vidéo pour de longues vidéos, ainsi que pour prendre en charge les sous-titres de transcription audio et vidéo. Le projet vise à simplifier le processus de création de contenu vidéo et à fournir des fonctions efficaces de génération de sous-titres et de traduction. Les utilisateurs peuvent rapidement convertir des vidéos longues en vidéos courtes et générer les fichiers de sous-titres correspondants par le biais d'opérations simples, ce qui convient à une variété de scénarios, tels que l'éducation, le divertissement et la promotion commerciale.

Conçu avec une interface web, l'outil est simple et intuitif à utiliser, et prend en charge plusieurs plateformes, dont Windows, Linux et Mac. Grâce à la puissante capacité de Gemini à comprendre intelligemment le contenu vidéo, à générer des textes narratifs professionnels et à prendre en charge la traduction de sous-titres de haute qualité à l'aide de la méthode de réflexion en trois étapes, l'outil est un assistant puissant pour les créateurs de vidéos et les éditeurs de contenu. En tant que pyVideoTrans Des outils d'appariement sont utilisés.

Liste des fonctions

• Vidéo longue en un clic pour créer un commentaire AI fonction vidéo courte
• Génération intelligente de rapports récapitulatifs sur le contenu vidéo
• Prise en charge de la méthode de réflexion en trois étapes pour la traduction des fichiers de sous-titres SRT
• Transcription automatique des fichiers audio et vidéo en sous-titres SRT
• Fonctionnement de l'interface web, supportant l'utilisation multiplateforme
• Prise en charge des mots d'invite personnalisés de l'IA afin d'optimiser la production
• Interface GeminiAI intégrée, compatible avec Gemini-1.5-flash et d'autres modèles

Utiliser l'aide

1. préparation à l'environnement

Avant de commencer à utiliser ai2srt, vous devez vous assurer que les conditions suivantes sont remplies :

• Environnement stable de proxy web (obligatoire)
• Clé API GeminiAI (gratuite)
• Choisir la bonne version du système d'exploitation

2. l'installation et le déploiement

Déploiement rapide pour les utilisateurs de Windows :

1. Télécharger la dernière version pré-packagée depuis la page GitHub Releases
2. Extraire le fichier zip téléchargé (par exemple window-gemini-video-tools-0.3.7z)
3. Double-cliquez sur le fichier "startup.bat" pour lancer le programme.
4. Le programme ouvrira automatiquement l'interface opérateur dans votre navigateur : http://127.0.0.1:5030

Etapes de déploiement pour les utilisateurs Linux/Mac :

1. Cloner le dépôt de code :

git clone https://github.com/jianchang512/ai2srt

2. Accédez au catalogue de projets :

cd ai2srt

3. Créer et activer un environnement virtuel :

python3 -m venv venv
source ./venv/bin/activate

4. Installer les paquets de dépendances :

pip3 install -r requirements.txt

5. Lancer l'application :

python3 app.py

3) Description de l'utilisation fonctionnelle

3.1 Création d'une narration vidéo

1. Chargement de fichiers vidéo longs à traiter dans l'interface web
2. Sélectionnez la fonction "Créer une vidéo de narration".
3. Configurer les paramètres de GeminiAI et les mots d'invite (optionnel)
4. Cliquez sur Démarrer le traitement et attendez que l'IA analyse et génère le commentaire.
5. Le système synthétise automatiquement une nouvelle vidéo avec une narration.

3.2 Transcription et traduction des sous-titres

1. Télécharger les fichiers audio et vidéo à traiter
2. Sélectionnez la fonction "Transcription des sous-titres" ou "Traduction des sous-titres".
3. Pour la fonction de traduction, un processus de réflexion en trois étapes peut être utilisé pour garantir la qualité de la traduction
4. Attendez la fin du traitement, puis téléchargez le fichier de sous-titres SRT obtenu.

3.3 Génération d'un résumé vidéo

1. Télécharger le fichier vidéo
2. Sélectionnez la fonction "Résumé vidéo".
3. Attendre que l'IA analyse le contenu vidéo et génère des rapports de synthèse

4) Précautions

1. Veillez à ce que le proxy réseau soit stable pendant l'utilisation, c'est la clé du bon fonctionnement de l'outil.
2. Il est recommandé d'utiliser le modèle gemini-1.5-flash, qui dispose d'un quota d'utilisation libre élevé.
3. Le rendement de l'IA peut être optimisé en ajustant les mots de repère.
4. En cas d'échec du traitement, vérifiez d'abord l'état du proxy réseau
5. Soyez conscient de la nécessité de maintenir la version du programme à jour avec les dernières fonctionnalités et optimisations.