Christian Fauré » Blog Archive » Introduction au Text-mining - The Diigo Meta page

• 07 Nov 09
  

  Laurent Bordet

  à traiter

• 06 Nov 09
  

  peir ric

  textmining moteur de recherche

  • A quoi cela peut bien servir ?

    
    
    • à classifier automatiquement des documents
    • à avoir un aperçu du contenu d’un document sans le lire
    • à alimenter automatiquement des bases de données
    • à faire de la veille sur des corpus documentaires importants
    • à enrichir l’index d’un moteur de recherche pour améliorer la consultation des documents

  • Il y a quelques règles de base que les outils de text-mining se doivent de respecter dans leur traitement. Ces règles de base sont plus ou moins chronologiquement les suivantes :

    
    
    • D’abord le logiciel doit reconnaître les unités de la langue que sont les mots (tokenisation)
    • Ensuite il doit savoir interpréter et prendre en compte la ponctuation et la mise page (retour à la ligne, paragraphe, etc.)
    • Puis les formes lexicales et grammaticales, qui peuvent énormément varier selon que la langue est l’anglais, l’arabe ou le chinois.
    • Ensuite, il y a une phase de lemmatisation : elle consiste à identifier les différentes flexions d’un terme, ou déclinaisons d’un verbe.
    
    

    L’ensemble des phases précédentes relèvent de ce que j’appelle l’analyse linguistique, au sortir de laquelle nous avons un document que le logiciel de text-mining a transformé. Si le document initial était fait pour les yeux de l’humain, le document après traitement est fait pour un traitemtn par les machine

  • 5 more annotations...
  • • 1. L’approche statistique :
    • 2. L’approche sémantique :
    • Les référentiels statiques peuvent être des mots clés, des listes à plats, des thesaurus, des ontologies. Le moteur de text-mining va rajouter aux documents qu’il traite l’ensemble des informations que peut contenir le référentiel.
    • Les référentiels dynamiques existent aujourd’hui surtout dans ma tête.
    • le document qui passe par le moteur de text-mining va être enrichi par des informations qui sont déduites du référentiel : le référentiel fait un travail de déduction avant de donner sa réponse au moteur de text-ming qui va enrichir le document.
• 31 Oct 09
  

  Eric Delcroix

  textmining

• 

  Christophe Deschamps

  Excellente intro au text-mining par Christian Fauré.

  Ib textmining veille

• 10 Dec 07
  

  Sylvie Le Bars

  2007 billet del.icio.us imported textmining

Would you like to comment?

Join Diigo for a free account, or sign in if you are already a member.