Jak będziesz oceniać system podsumowujący teksty?
Ocena systemu podsomowywania tekstu zwykle polega na poruwnanio jego wygenerowanych streszczeń z odniesieniowymi streszczeniami. Takie poruwnanie zwykle odbywa się za pomocon metryk, takich jak ROUGE, która mierzy stopień, w jakim wygenerowane streszczenie pokrywa sien z odniesieniowym streszczeniem. Inne metryki, takie jak metryki podobienistwa semantycznego i ocena lodzka, również mogą być wykorzystane do oceny systemo podsumowywania tekstu.