Я оцениваю сводки, сгенерированные машиной, со справочными сводками из набора данных duc 2003. Я пробовал pyrouge , но застрял с ошибками, а с files2rouge я могу получить только один балл за весь документ.
С easy-rouge установка и оценка довольно просты и просты, но я хочу знать, почему он не так популярен, и оценки по easy-rouge так же хороши, как у других?
pip install easy-rouge
from rouge.rouge import rouge_n_sentence_level
rouge_n_sentence_level(prediction_en[1], reference_en[1],2)
Дает следующий вывод,
RougeScore(recall=0.35135135135135137, precision=0.3132530120481928, f1_measure=0.33121019108280253)