CAM(Class Activation Map)(作成中)

CAM(CNNの特徴の可視化を含めて)

CAM(Class Activation Map)は、画像分類等において、クラスが画像のどの領域に注目しているのかを可視化する手法です。

saliency mapとか言われたりする

リンク集

• CNN Heat Maps: Gradients vs. DeconvNets vs. Guided Backpropagation
• 

  GitHub - PAIR-code/saliency: Framework-agnostic implementation for state-of-the-art saliency methods (XRAI, BlurIG, SmoothGrad, and more).

  ...

  

  github.com

CAMの手法まとめ

CAM

2015年の”Learning Deep Features for Discriminative Localization”が、CAM(Class Activation Map)の代表的な手法の始まりだと思います。

Bolei Zhou, Aditya Khosla, Agata Lapedriza, Aude Oliva, Antonio Torralba(2015). Learning Deep Features for Discriminative Localization

Grad-CAM

CAMの派生です。

Ramprasaath R. Selvaraju, Michael Cogswell, Abhishek Das, Ramakrishna Vedantam, Devi Parikh, Dhruv Batra(2016). Grad-CAM: Visual Explanations from Deep Networks via Gradient-based Localization.

https://betashort-lab.com/データサイエンス/ディープラーニング/grad-cam/

Guided Grad-CAM

Grad-CAMとGuided Backpropagationを組み合わせた手法です。

Grad-CAMの論文で、Grad-CAMと共に提案されました。

Ramprasaath R. Selvaraju, Michael Cogswell, Abhishek Das, Ramakrishna Vedantam, Devi Parikh, Dhruv Batra(2016). Grad-CAM: Visual Explanations from Deep Networks via Gradient-based Localization.

https://betashort-lab.com/データサイエンス/ディープラーニング/grad-cam/

Guided BaskPropagation

Jost Tobias Springenberg, Alexey Dosovitskiy, Thomas Brox, Martin Riedmiller(2014). Striving for Simplicity: The All Convolutional Net.

Smooth Grad

Daniel Smilkov, Nikhil Thorat, Been Kim, Fernanda Viégas, Martin Wattenberg(2017). SmoothGrad: removing noise by adding noise

参考

2019年までのCAM(Class Activation Map)まとめ - Qiita

...

qiita.com

ディープラーニングの判断根拠を理解する手法 - Qiita

...

qiita.com