ROUGE (評価指標)
主に以下の5つの評価指標が利用される。
ROUGE-N:システムと参照の要約の間のn-gram ROUGE-1は、システム要約と正解要約の間の1-gram(単語)の共起を評価する。 ROUGE-2は、システム要約と正解要約の間の2-gramの共起を評価する。
ROUGE-L:最長共通部分列(LCS) ベースの評価。システム要約と正解要約間で文の順番に沿って共起している単語の個数で評価するため、文単位の類似性を自然に評価できる。
ROUGE-W:重み付けされたLCSベースの指標。
ROUGE-S:Skip-bigramベースの共起指標。
ROUGE-SU:Skip-bigramと1-gramベースの共起指標。