Synapse Développement franchit une étape décisive dans la compréhension d’un texte écrit par un ordinateur

À l’occasion du CLEF 2014 (Conference and Labs of Evaluation Form), dont la 15ème édition s’est déroulée à Sheffield du 15 au 18 septembre dernier,
Synapse Développement a vu sa technologie d’analyse du langage distinguée à l’évaluation Entrance Exams (2). Ce projet vise à évaluer au niveau international les performances des logiciels de compréhension de texte.



L’algorithme de Synapse Développement est le premier à réussir cette
évaluation.

Synapse Développement a participé à cette évaluation pour l'anglais
et le français (les textes, questions et réponses, étant traduits
par les organisateurs de l’anglais vers le français, italien, russe
et espagnol).


Les tests utilisés pour évaluer les performances des logiciels de
compréhension des textes sont initialement conçus pour vérifier le
niveau de langue des étudiants japonais qui veulent intégrer
l’Université. Il s’agit de QCM portant sur la compréhension de
textes. Les étudiants ont, pour chaque question, le choix entre 4
réponses, ce qui fait qu’un étudiant qui répondrait au hasard aurait
un taux de réussite autour de 25%. Pour compliquer le tout, une
réponse « piège » est insérée dans les 4 réponses, induisant en
erreur les étudiants qui n’auraient qu’une compréhension
superficielle de la langue.


Avec
59% de bonnes réponses
en français (soit 33 bonnes réponses sur 56) et 45% en anglais,

Intelligent Reader

by Synapse

se place en première position, loin devant les autres participants.
Sur 29 soumissions, 15 obtiennent des résultats inférieurs ou égaux
à 25%, ce qui souligne la difficulté de cette évaluation. Cette
performance valide la pertinence de l’approche mise en œuvre par
Synapse Développement, qui place l’analyse sémantique profonde au
cœur de ses solutions.

En trouvant plus de la moitié des bonnes réponses en français,

Intelligent Reader
by Synapse
serait admissible dans une université japonaise
pour ce test.



Pourquoi comprendre vraiment un texte ?

Les technologies de recherche d'information, du type Google, ou les
systèmes à base de règles et de bases de données, du type Siri ou
Watson, permettent de gérer de nombreux cas de recherche
d'information comme d'interaction homme-machine. Ces approches
restent cependant à la surface du texte et ne sauraient obtenir des
résultats convenables dans des évaluations comme Entrance Exams.


Or, la compréhension réelle du texte, écrit ou oral, est la clé
incontournable des développements futurs de l'informatique. Elle
nécessite des composants sémantiques très sophistiqués et
performants, pour retrouver le sens précis des mots polysémiques,
pour identifier les référents de pronoms comme "il" ou d'adjectifs
comme "sa", pour effectuer des inférences ou encore gérer les
conversités (pour prendre un exemple simple : "si A achète X à B,
alors B vend X à A"). Ainsi, en "comprenant" véritablement le texte,
c’est-à-dire en prenant en compte le contexte et les relations du
discours, les composants logiciels développés par Synapse
Développement sont capables d'extraire des informations
sous-jacentes, induites ou implicites.


Synapse Développement travaille depuis plus de 20 ans sur l'analyse
syntaxique, sémantique, et maintenant pragmatique des textes. La
fiabilité de ses analyses lui permet de développer, pour la
correction (à travers son logiciel Cordial) mais également pour de
nombreux industriels (Amazon, PagesJaunes, SFR, Le Sphinx, DBIT…)
des logiciels à haute valeur ajoutée : amélioration de la qualité
éditoriale, analyse d’opinions, analyse de requêtes, moteur de
questions-réponses…


Même si ces analyses sont toujours perfectibles, Synapse
Développement, à la pointe des technologies de compréhension du
texte, démontre jour après jour que la compréhension réelle de
l'homme par l'ordinateur n'est plus une utopie.