Quels sont les mots d'arrêt? Ce sont des mots utilisés couramment dans les documents qui ajoutent peu de valeur pour comprendre la signification d'un document.

Pourquoi les mots d'arrêt importants? Quand on enlève les mots d'arrêt d'un document, comprendre le sens du document devient plus facile et le contexte derrière l'article.

Par exemple, quand on enlève les mots d'arrêt de la phrase “Narendra Modi est le premier ministre de l'Inde” nous aurons Narendra, modi, premier ministre, L'Inde comme la sortie qui dit ce que la phrase est tout au sujet.

Par exemple, suppression de mots d'arrêt est une application importante dans la construction de moteurs de recherche.

arrêter les mots dans les moteurs de recherche

Comment les mots d'arrêt calculés?

Les mots vides sont calculés en utilisant une méthode appelée TF (fréquence à long terme) IDF (fréquence de documents inverse) le plus souvent. Pour en savoir plus sur TF IDF lire cet article. Document inverse freqency fréquence à long terme

Avantages de la suppression des mots d'arrêt-

  1. Performance améliorée- La réduction du nombre de mots à traiter. Dans les moteurs de recherche ce qui réduit la taille de l'index.
  2. Recherches deviennent plus rapides.arrêter les mots dans les moteurs de recherche

Inconvénients de la suppression des mots d'arrêt-

  1. parfois, le contexte d'une phrase est perdue. Par exemple, dans la phrase- “je ne suis pas en colère” si on enlève ne pas , le contexte, le sens de la phrase est perdue.

Peut arrêter des mots différents pour différents domaines-

  1. Oui mots peuvent varier arrêtent d'un document à.
  2. langues aussi différentes ont séparés mots d'arrêt.

Comment mettre en œuvre des mots d'arrêt-

  1. Vous pouvez mettre en œuvre à l'aide NLTK en python. À partir d'un fichier txt donné, le code suivant peut supprimer des mots d'arrêt-
     
  2. google alternative di ricerca del sito Archives.

 

 

Catégories: Non classé

Muthali Ganesh

Muthali aime écrire sur les technologies émergentes et des solutions faciles pour les questions de technologie complexes. Vous pouvez le rejoindre à travers le chat ou en soulevant un ticket de support sur le côté gauche de la page.