TransformersはCNNよりも堅牢ですか？

Transformerは、視覚認識のための強力なツールとして登場しました。最近の研究では、幅広い視覚的ベンチマークで競争力のあるパフォーマンスを実証することに加えて、トランスフォーマーは畳み込みニューラルネットワーク（CNN）よりもはるかに堅牢であると主張しています。それにもかかわらず、驚くべきことに、これらの結論は、トランスフォーマーとCNNが異なるスケールで比較され、異なるトレーニングフレームワークで適用される不公平な実験設定から導き出されていることがわかります。このホワイトペーパーでは、堅牢性の評価に焦点を当てて、TransformersとCNNの間の最初の公正で詳細な比較を提供することを目指しています。統一されたトレーニング設定では、敵対的な堅牢性を測定するときに、トランスフォーマーがCNNよりも優れているという以前の信念に最初に挑戦します。さらに驚くべきことに、CNNは、トランス

[arxiv_reader]

Transformerは、視覚認識のための強力なツールとして登場しました。最近の研究では、幅広い視覚的ベンチマークで競争力のあるパフォーマンスを実証することに加えて、トランスフォーマーは畳み込みニュー