La valutazione di un sistema di riepilogo testuale viene in genere eseguita confrontando i riepiloghi generati con i riepiloghi di riferimento. Tale confronto viene in genere eseguito utilizzando metriche come ROUGE, che misura la misura in cui il riepilogo generato si sovrappone a un riepilogo di riferimento. Altre metriche come le metriche di somiglianza semantica e la valutazione umana possono essere utilizzate anche per valutare un sistema di riepilogo del testo.
Come valuterete un sistema di sintesi testuale?