sensitive-word : outil de filtrage des mots sensibles, mise en œuvre efficace de l'algorithme DFA

Introduction générale

L'outil de filtrage de mots sensibles (Sensitive Word) est un outil de filtrage de mots sensibles Java très performant basé sur la mise en œuvre de l'algorithme DFA. L'outil permet de détecter et de filtrer efficacement les mots sensibles, de prendre en charge la conversion de formats multiples et d'appliquer des stratégies de remplacement personnalisées. Son objectif est de fournir une solution de filtrage des mots sensibles facile à utiliser et plus performante pour une variété de scénarios d'application.

Liste des fonctions

• Détection des mots sensibles : prise en charge de l'appréciation des mots sensibles, du retour, de la désensibilisation et d'autres opérations.
• Conversion de format : Prise en charge de la conversion des coins entiers et des demi-coins, de la conversion du chinois traditionnel et simplifié, de la conversion des majuscules anglaises, etc.
• Remplacement personnalisé : Prise en charge des mots sensibles et des stratégies de remplacement définis par l'utilisateur.
• Mise à jour dynamique : prise en charge de la mise à jour dynamique de la base de données des mots sensibles, efficacité en temps réel
• Interface d'étiquetage : gestion des étiquettes pour les mots sensibles
• Traitement des caractères spéciaux : correspondance souple avec saut des caractères spéciaux

Utiliser l'aide

Processus d'installation

1. Préparation de l'environnementJDK 1.8+ et Maven 3.x+ : Assurez-vous que JDK 1.8+ et Maven 3.x+ sont installés.
2. Introduction des dépendancesDans le cadre du projetpom.xmlpour ajouter les dépendances suivantes :

   <dependency>
       <groupId>com.github.houbb</groupId>
       <artifactId>sensitive-word</artifactId>
       <version>0.19.2</version>
   </dependency>
   

3. initialisationInitialiser la classe SensitiveWordHelper dans le projet.

Utilisation

1. Détection de mots sensibles: :

   String text = "待检测的文本内容";
   boolean contains = SensitiveWordHelper.contains(text);
   

   Cette méthode renvoie une valeur booléenne indiquant si le texte contient des mots sensibles.

2. remplacement de mots sensibles: :

   String replacedText = SensitiveWordHelper.replace(text, '*');
   

   Cette méthode remplace les mots sensibles du texte par les caractères spécifiés.

3. Obtenir tous les mots sensibles: :

   List<String> sensitiveWords = SensitiveWordHelper.findAll(text);
   

   Cette méthode renvoie une liste de tous les mots sensibles du texte.

4. Banques de phrases sensibles personnalisées: :

   SensitiveWordHelper.addSensitiveWord("自定义敏感词");
   

   Cette méthode permet aux utilisateurs d'ajouter dynamiquement des mots sensibles.

Procédure d'utilisation détaillée

1. Initialisation de la base de données des mots sensiblesChargement du lexique sensible par défaut ou d'un lexique sensible personnalisé au démarrage du projet.
2. détection de texteDans le contenu du texte à détecter, appelez la fonctionSensitiveWordHelper.containspour déterminer s'il contient des mots sensibles.
3. traitement de texte sensibleLes services d'aide à la décision : Choisissez d'utiliser, en fonction des besoins de l'entreprise, les services d'aide à la décision de la Commission européenne.replacepour une substitution sensible des mots, ou utiliser la méthodefindAllpour obtenir tous les mots sensibles en vue d'un traitement ultérieur.
4. mise à jour dynamique (Internet)Pendant le fonctionnement, leaddSensitiveWordLa méthode met à jour dynamiquement la base de données des mots sensibles afin de garantir une détection précise et en temps réel des mots sensibles.