autoMate : un outil natif qui combine l'IA et la RPA pour automatiser les tâches informatiques

Introduction générale

autoMate est un outil d'automatisation locale mis à disposition par yuruotong1 sur GitHub, dont la fonction principale est l'IA+RPA (Intelligence Artificielle + Robotic Process Automation). Il combine la compréhension intelligente de modèles de langage à grande échelle avec les capacités d'exécution de processus de la RPA, permettant aux utilisateurs d'automatiser des opérations complexes en décrivant simplement des tâches en langage naturel, telles que "organiser les fichiers du bureau" ou "générer des rapports hebdomadaires". Avec un déploiement local et la sécurité des données, autoMate est idéal pour les individus ou les équipes qui ont besoin de gérer efficacement des tâches répétitives. autoMate rompt avec la complexité des ensembles de règles RPA traditionnels et rend l'automatisation plus intelligente et plus facile à utiliser grâce à des interactions intuitives pilotées par l'IA.

Liste des fonctions

• AI+RPA Exécution des tâchesAutomatisez les flux de travail en plusieurs étapes en combinant la compréhension de l'IA avec les opérations RPA.
• entrée en langue naturelleLe système de gestion de l'information : Il décrit les tâches dans un langage courant sans programmation ni configuration de règles.
• Analyse du contenu de l'écranReconnaissance intelligente des éléments de l'interface pour effectuer des actions telles que cliquer et taper.
• mode de fonctionnement localLe système de gestion de l'information : fonctionne hors ligne pendant toute la durée de l'opération pour garantir la confidentialité des données.
• adaptation complète de l'interfaceLes logiciels et les pages web ne sont pas des produits de consommation courante.
• Prise en charge de plusieurs modèlesLe système est compatible avec les grands modèles linguistiques courants, ce qui permet une configuration souple.
• Déploiement en un clicSimplifier le processus d'installation et s'adapter à l'environnement chinois.

Utiliser l'aide

Processus d'installation

Le processus d'installation d'autoMate est optimisé pour la fonctionnalité AI+RPA afin que les utilisateurs soient rapidement opérationnels. Vous trouverez ci-dessous les étapes détaillées :

1. Préparation de l'environnement: :
   • Installer Git : téléchargez-le à partir du site web de Git.
   • Pour installer Miniconda : visitez le site officiel de Conda.
   • Vérifiez que votre système supporte Python 3.12.
2. projet de clonage: :
   • S'exécute dans le terminal :

     git clone https://github.com/yuruotong1/autoMate.git
     

   • Accéder au catalogue :

     cd autoMate
     

3. Créer l'environnement: :
   • Créer et activer un environnement Conda :

     conda create -n "automate" python=3.12
     conda activate automate
     

4. Installation des dépendances: :
   • Mise en œuvre :

     pip install -r requirements.txt
     

   • Si l'on vous demande s'il y a un conflit de version, mettez à jour la pip :

     pip install --upgrade pip
     

5. kit de démarrage: :
   • La course à pied :

     python main.py
     

   • accès au navigateur http://localhost:7888/ Configurez le modèle et la clé API (si un modèle en ligne est requis).

Précautions d'installation

• Prise en charge du GPUSi vous utilisez l'accélération de l'inférence en IA, vous devez vous assurer que les versions de PyTorch et de CUDA correspondent, voir le site web de PyTorch.
• Compatible avec le chinoisLes chemins chinois sont pris en charge sans ajustements supplémentaires.

Comment l'utiliser

La fonctionnalité AI+RPA d'autoMate fonctionne par l'intermédiaire d'une interface de navigateur, dont voici un guide détaillé :

1. mise en œuvre du mandat AI+RPA

• procédure: :
  1. spectacle (un billet) http://localhost:7888/.
  2. Saisissez la tâche dans le champ de saisie, par exemple "Ouvrir Excel, créer un tableau et y inscrire les données relatives aux ventes de la veille".
  3. Cliquez sur "Soumettre", l'IA analyse la commande et l'APR effectue l'opération.
• Description fonctionnelle: :
  • L'IA est chargée de comprendre les exigences complexes et la RPA se charge des opérations d'interface telles que cliquer sur des boutons et saisir des données.
  • Prise en charge des tâches séquentielles, telles que "enregistrer le formulaire et envoyer le courrier".
• Scénarios d'utilisation: Traitement automatique des états financiers, mise à jour par lots des bases de données.

2. saisie en langage naturel

• procédure: :
  1. Entrez une commande telle que "Ouvrez votre navigateur et recherchez 'AI+RPA case'".
  2. L'outil lance automatiquement le navigateur et effectue une recherche.
• Description fonctionnelle: :
  • Il n'est pas nécessaire d'écrire des scripts, l'IA traduit le langage directement en étapes d'action.
  • Prise en charge des descriptions vagues telles que "Organiser les fichiers récents".
• finesseLes informations doivent être décrites dans un langage simple afin d'éviter toute ambiguïté.

3. l'analyse du contenu de l'écran

• procédure: :
  1. Activer le mode "Reconnaissance d'écran".
  2. Saisissez "Cliquez sur le bouton 'Enregistrer'" et l'outil est reconnu et fonctionne.
• Description fonctionnelle: :
  • L'IA analyse les éléments de l'écran et la RPA effectue des clics ou des saisies précises.
  • Peut gérer des interfaces dynamiques telles que des pop-ups ou des pages web.
• Scénarios d'utilisationLogiciel de désactivation par lots des notifications et d'ouverture de session automatique.

4. mode de fonctionnement local

• procédure: :
  • La valeur par défaut est le mode local, aucune configuration n'est requise.
  • Les données sont stockées localement autoMate.db Documentation.
• Description fonctionnelle: :
  • L'IA et la RPA fonctionnent localement, sans qu'il soit nécessaire de télécharger des données.
  • Convient aux scénarios de traitement de données sensibles.

5. adaptation complète de l'interface

• procédure: :
  1. Tapez "Ouvrez Word, tapez 'minutes' et sauvegardez".
  2. L'outil s'adapte à l'interface Word et s'exécute.
• Description fonctionnelle: :
  • Prend en charge les opérations interlogiciels telles que la copie d'Excel vers Word.
  • Il ne repose pas sur une API spécifique et est basé sur la reconnaissance visuelle.

6. support multi-modèle

• procédure: :
  1. Sélectionnez le modèle (par exemple, modèle local ou en ligne) dans la page Paramètres.
  2. Saisissez la clé API (si vous utilisez un modèle en ligne).
  3. Sauvegardez et redémarrez.
• Liste de soutien: Voir les détails SUPPORT_MODEL.md.

Exemple de processus opérationnel

Exemple : Regroupement automatique des données de commande

1. Entrez : "Ouvrez le logiciel de gestion des commandes, exportez la liste des commandes de la veille et enregistrez-la sur votre bureau".
2. AI Comprendre les exigences, RPA Lancez le logiciel, cliquez sur Exporter et enregistrer.
3. Continuez à taper "Ouvrir Excel, importer les données de la commande et trier par montant".
4. L'outil importe le fichier et effectue le tri.

• en fin de compteL'ensemble du processus est automatisé, de l'exportation à l'assemblage en quelques minutes.

problèmes courants

• échec du démarrageVérification de la version de Python (3.12 requise) et de l'intégrité des dépendances.
• AI Comprendre l'erreurSimplifier les instructions ou ajuster les paramètres du modèle : Simplifier les instructions ou ajuster les paramètres du modèle.
• RPA Blocages opérationnelsLa situation est la suivante : s'assurer que les ressources du système sont suffisantes ou changer le mode de l'unité centrale de traitement.

Recommandations d'utilisation

• utilisation initialeLes tâches simples telles que "ouvrir le bloc-notes" peuvent être testées.
• utilisateur expérimentéLa recherche sur l'intelligence artificielle : explorer le potentiel de l'IA+RPA en conjonction avec des instructions à plusieurs étapes.
• ajuster les composants pendant les essaisPour résoudre le problème, consultez les journaux du répertoire racine.