Syntactic testsuites and Textual Entailment Recognition

Paul Bedaride 1 Claire Gardent 1
1 TALARIS - Natural Language Processing: representation, inference and semantics
Inria Nancy - Grand Est, LORIA - Laboratoire Lorrain de Recherche en Informatique et ses Applications
Abstract : We focus on textual entailments mediated by syntax and propose a new methodology to evaluate textual entailment recognition systems on such data. The main idea is to generate a syntactically annotated corpus of pairs of (non-)entailments and to use error mining to identify the most likely sources of errors. To illustrate the approach, we apply this methodology to the Afazio RTE system and show how it permits identifying the most likely sources of errors made by this system on a testsuite of 10 000 (non) entailment pairs.
Type de document :
Communication dans un congrès
The seventh International Conference on Language Resources and Evaluation - LREC 2010, May 2010, Valletta, Malta. 2010
Liste complète des métadonnées

Littérature citée [7 références]  Voir  Masquer  Télécharger

https://hal.inria.fr/inria-00536020
Contributeur : Paul Bedaride <>
Soumis le : lundi 15 novembre 2010 - 09:39:53
Dernière modification le : jeudi 11 janvier 2018 - 06:21:35
Document(s) archivé(s) le : vendredi 26 octobre 2012 - 15:40:12

Fichier

lrec10-bedgar.pdf
Fichiers produits par l'(les) auteur(s)

Identifiants

  • HAL Id : inria-00536020, version 1

Collections

Citation

Paul Bedaride, Claire Gardent. Syntactic testsuites and Textual Entailment Recognition. The seventh International Conference on Language Resources and Evaluation - LREC 2010, May 2010, Valletta, Malta. 2010. 〈inria-00536020〉

Partager

Métriques

Consultations de la notice

199

Téléchargements de fichiers

95