Google T5 atteint 88,9 sur le benchmark SuperGLUE, tout près de la référence humaine à 89,8

SuperGLUE rassemble des données destinées à entraîner, évaluer et analyser des systèmes de compréhension du langage naturel.

Avec les progrès technologiques, les modèles ont commencé à dépasser la référence du benchmark GLUE existant, ce qui a conduit à la création de SuperGLUE. Mais il semble que celui-ci aussi sera bientôt dépassé.

[xguru]

Lectures complémentaires

Qu’est-ce que le modèle de langage d’intelligence artificielle (IA) « BERT » : http://www.aitimes.kr/news/articleView.html?idxno=13117

Décryptage de BERT : http://docs.likejazz.com/bert/

[xguru]

Google T5 (Text-To-Text Transfer Transformer)

• https://github.com/google-research/text-to-text-transfer-transformer