DEFT2012

accueilprésentationcorpusévaluationsoumissionactes

Soumission

Les soumissions se font via l'interface suivante : evalserver.limsi.fr/deft

Connectez-vous à cette interface au moyen des codes d'accès qui vous ont été communiqués (message du 6 avril).

Cette interface vous permet, d'une part de soumettre vos fichiers de résultats (corpus d'apprentissage et de test pour chacune des deux pistes), et d'autre part de lancer une évaluation de vos fichiers.

Fichiers de sortie :

Extrait d'un fichier nommé "deft2012_appr-t1.deft" qu'il est possible de soumettre pour la première piste, corpus d'apprentissage (les fichiers du corpus sont traités dans le désordre) :

as_2004_010607ar.xml	vêtements;femmes;Premières Nations;musées
meta_2008_019646ar.xml	concept;stratégie de traduction;terme;traduction
as_2001_000207.xml	Labrecque;économie politique;féminisme;ethnographie
rse_2007_016187.xml	éducation
...

La mise en ligne de vos fichiers doit suivre la procédure suivante :

L'évaluation du fichier mis en ligne se fait de la manière suivante (le script d'évaluation prend du temps pour traiter un fichier, comptez une bonne dizaine de minutes pour un fichier du corpus d'apprentissage) :

Les résultats sont exprimés en micro-mesure (voir site DEFT). Les résultats détaillés (bonne reconnaissance de chaque mo-clé) sont disponibles à l'issue du calcul des résultats.