Skip to Main content Skip to Navigation
Conference papers

Description d'un protocole d'évaluation automatique comme alternative à l'évaluation humaine. Application à la validation de relations syntaxiques induites

Nicolas Béchet 1
1 TEXTE - Exploration et exploitation de données textuelles
LIRMM - Laboratoire d'Informatique de Robotique et de Microélectronique de Montpellier
Résumé : Cet article propose un protocole d'évaluation afin de valider la qualité d'approches, visant à évaluer et à ordonner automatiquement des relations syntaxiques dites induites. Les approches évaluées se fondent sur l'interrogation d'un moteur de recherche sur le Web. Les résultats du moteur de recherche sont alors couplés avec diverses mesures statistiques : l'information mutuelle, l'information mutuelle au cube, le coefficient de Dice et la fréquence, ou popularité. Le protocole d'évaluation propose d'utiliser deux corpus, le premier de test et le second de validation, appartenant tous deux au même domaine. Le principe est de retrouver dans le second corpus les relations syntaxiques induites, non présentes originalement dans le premier corpus. Il est alors étudié la taille minimale du corpus d'évaluation afin de permettre une évaluation pertinente.
Document type :
Conference papers
Complete list of metadata

Cited literature [17 references]  Display  Hide  Download

https://hal-lirmm.ccsd.cnrs.fr/lirmm-00370815
Contributor : Nicolas Béchet <>
Submitted on : Wednesday, March 25, 2009 - 2:47:26 PM
Last modification on : Thursday, January 23, 2020 - 11:56:07 AM
Long-term archiving on: : Friday, October 12, 2012 - 2:20:36 PM

File

NB_EvalECD.pdf
Files produced by the author(s)

Identifiers

  • HAL Id : lirmm-00370815, version 1

Collections

Citation

Nicolas Béchet. Description d'un protocole d'évaluation automatique comme alternative à l'évaluation humaine. Application à la validation de relations syntaxiques induites. Evaluation des Méthodes d'Extraction de Connaissances dans les Données, Atelier de EGC'09, France. pp.A525-A534. ⟨lirmm-00370815⟩

Share

Metrics

Record views

226

Files downloads

227