シングルチャンネル入力でVGGモデルを微調整する方法は？

Question

VGGモデルは3チャンネルのRGB画像を入力として受け入れますが、私のデータは単一のグレー画像です.VGGモデルの最初のコンバレイヤーでどのように重みを利用するかの提案はありますか？

Answer 1

したがって、最初のレイヤーのフィルタのサイズはwxhx 3（VGGの場合、w = h = 3）です。最後の次元に平均をとり、wxhx 1として使用することをお勧めします。あなたが他の重さを変更する必要はありません。

これは、フローイメージでVGG Imagenetモデルを初期化するときに人々が適用した同様のアプローチからインスピレーションを受けています。

https://arxiv.org/pdf/1507.02159v1.pdf（セクオン2.2）