AWS Certified AI Practitioner
Les métriques d'évaluation : ROUGE, BLEU et BERTScore
Les trois métriques que l'examen nomme, travaillées sur de vraies phrases et de vrais nombres, plus les métriques qu'AWS calcule réellement pour chaque type de tâche et l'angle mort qu'elles partagent toutes.
Intermédiaire 20 minutes 5 Objectifs d'apprentissage
- Définir ROUGE et calculer ROUGE-1 et ROUGE-L sur un vrai couple de phrases
- Expliquer comment BLEU combine la précision par n-grammes avec une pénalité de brièveté et pourquoi c'est une métrique de corpus
- Expliquer en quoi BERTScore diffère des métriques de recouvrement de mots et ce qu'il attrape qu'elles ratent
- Associer chaque métrique à la tâche qui lui convient et nommer l'angle mort qu'elles partagent
- Identifier la métrique calculée par AWS pour chaque type de tâche d'évaluation