Compréhension en lecture : quand l'IA fait mieux que l'humain

Le par  |  6 commentaire(s)
intelligence-artificielle-IA

Des modèles d'apprentissage automatique de Microsoft et Alibaba ont réalisé un meilleur score que l'homme dans un test de compréhension en lecture.

Microsoft et Alibaba ont chacun créé une intelligence artificielle capable de lire un document et répondre à des questions, aussi bien voire même mieux qu'un être humain. Tous deux se disputent ainsi la première place au Stanford Question Answering Dataset (SQuAD).

Le SQuAD est présenté comme un ensemble de données de compréhension en lecture composé de questions sur un ensemble d'articles de Wikipédia. Pour plus de 500 articles de l'encyclopédie libre, ce sont 100 000 questions et réponses .

La réponse à chaque question est une portion du passage de lecture correspondant. On comprendra alors que l'exercice implique des réponses factuelles.

Le 3 janvier, Microsoft a soumis un modèle qui a obtenu un score de 82,650 points en fournissant des réponses exactes à des questions. Un système d'Alibaba a par la suite réalisé un score de 82,440. Sur le même ensemble de questions et réponses, le score humain a été de 82,304 points.

Alibaba explique que pour une question du type " Quelles sont les causes de la pluie ? ", son modèle a pu localiser avec exactitude des phrases précises contenant des réponses potentielles.

Dans un billet de blog, Microsoft écrit déjà mettre en pratique des versions préliminaires de son modèle dans son moteur de recherche Bing, et travaille pour une application sur des problèmes complexes.

Complément d'information

Vos commentaires

Gagnez chaque mois un abonnement Premium avec GNT : Inscrivez-vous !
Trier par : date / pertinence
Le #1995951
Une IA est forcée d'être plus précise que l'humain ; elle n'a pas de sensations.
Le #1995963
lebonga a écrit :

Une IA est forcée d'être plus précise que l'humain ; elle n'a pas de sensations.


Et en plus elle a accès à une base de données gigantesque que nous ne pouvons avoir nous humains.
Le #1995965
Cela dépend aussi de l'intelligence des humains de test.
Le #1995982
phebus a écrit :

Cela dépend aussi de l'intelligence des humains de test.


C'est la réflexion que je me faisais. Comment est composé l'échantillon de test.
Et quand on voit les gamins aujourd'hui, l'écart risque de s'accroitre de plus en plus.
Le #1996004
phebus a écrit :

Cela dépend aussi de l'intelligence des humains de test.


Le cerveau humain fluctue dans sa concentration selon l'humeur, le temps de sommeil, etc.
L'intelligence artificielle est stable et jamais fatiguée, c'est son intérêt.

Plus généralement, les intelligences artificielles actuelles sont monotâches. Un cerveau humain a de multiples capacités et gère énormément de choses en même temps, dont la plupart sont inconscientes.
Il ne faut pas oublier que l'on compare des choses qui ne devraient pas vraiment l'être... C'est une annonce commerciale avant tout.
Le #1996014
C'est forcé d'être mieux afin qu'un jour la machine puisse prendre le dessus sur l'homme.
Suivre les commentaires
Poster un commentaire
Anonyme