AWS Certified AI Practitioner
Métricas de evaluación: ROUGE, BLEU y BERTScore
Las tres métricas que nombra el examen, trabajadas con oraciones reales y números reales, más las métricas que AWS calcula para cada tipo de tarea y el punto ciego que comparten todas.
Intermedio 20 minutos 5 Objetivos de aprendizaje
- Definir ROUGE y calcular ROUGE-1 y ROUGE-L sobre un par de oraciones real
- Explicar cómo BLEU combina la precisión de n-gramas con una penalización por brevedad y por qué es una métrica de corpus
- Explicar en qué se diferencia BERTScore de las métricas de solapamiento de palabras y qué captura que ellas pierden
- Emparejar cada métrica con la tarea que le sirve y nombrar el punto ciego que comparten
- Identificar qué métrica calculada usa AWS para cada tipo de tarea de evaluación