質問: * 上記のようにFN,TN,TP,FPとして精度と再現率を求めるやり方は合っているか? * このシステムに上記のような精度と再現率を用いた評価は適切か? * このようなリジェクトあり多値問題システムの評価はどのようにして行えばよいか? になります。よくわからない文章になって申し訳ありません。 どうかよろしくお願いします。
回答: データベースに入っていない人は別の1つのラベルを用意すべきでしょう。 そして、そのラベルをモデルのリジェクトと対応させればよいのではないでしょうか。 リジェクトすべき人が閾値を下回ってリジェクトされているのであれば、それは正解です。 リジェクトすべき人に何かの判定がされているのなら、それは不正解なはずです。 リジェクトすべきでない人が正しく判定されたら、それは正解です。 リジェクトすべきでない人が間違って判定されたら、それは不正解です。 リジェクトすべきでない人が閾値を下回ってリジェクトされているのであれば、それも不正解です。