Apprentissage profond pour l'analyse en constituants par transition : modèles locaux et modèles globaux

old_uid9999
titleApprentissage profond pour l'analyse en constituants par transition : modèles locaux et modèles globaux
start_date2015/11/06
schedule11h
onlineno
location_infosalle 127
summaryLa présentation portera sur l'analyse syntaxique en constituants par transition à l'aide de méthodes statistiques, et se focalisera sur les modèles de pondération de type réseaux de neurones. Dans une première partie, nous présenterons un analyseur syntaxique entièrement supervisé basé sur des représentations distribuées (embeddings). Il utilise un modèle de pondération local et un décodage glouton. Nous présenterons ensuite une extension de ce modèle au cas de l'apprentissage structuré et de la recherche par faisceau. Nos expériences confrontent ces modèles à des méthodes de pondérations basées sur le perceptron. La dernière partie, plus succincte, évoquera  deux travaux en cours destinés à améliorer l'analyse en constituants : l'entraînement à l'aide d'un oracle dynamique et l'utilisation de représentations distribuées basées sur les caractères. Les travaux présentés sont réalisés en collaboration avec Benoît Crabbé.
responsiblesCandito