説明可能なAI
Integrated Gradientsはデータの入力値と出力値の勾配を用いて影響度を算出し、説明するための技術である。PyTorchのCaptumライブラリにはIntegrated Gradientsが実装されており、インタフェースなどが整備されている。
回帰型ニューラルネットワークなどの言語系モデルや畳み込みニューラルネットワークなどの画像モデルにおいて特徴量の重要度を算出する技術である。