周波数を使用した画像のセグメンテーション

Question

この画像を分割したいと考えています
（私は蜂だけを欲しい、私はラベルが付けられていないような100画像があります）。私はそれを行う最善の方法は、ミツバチが特定の頻度を持っているように見えるので、frenquencyドメインを使用することだと思います。しかし、私はそれをどうやって行うのか分かりません。正しい周波数を見つけるには？

あなたはもっと良い方法を考えていますか？

ありがとうございます！

Answer 1

お返事ありがとうございます！

私はCNN（unet architecture）を使用してこのタスクを解決しました。私は3つの完全な画像に注釈をつけました。そして、1つの画像にたくさんの蜂がいるので十分でした。訓練は、画像全体ではなく小さなパッチ（1匹の蜂を入れるのに十分な大きさ）を使って行われました。

また、セグメンテーションを改善するためにCRFを使用しています。

私は50枚の画像に方法をテストし、それは非常によく働くことになった:)

Answer 2

周波数領域の方法をセグメンテーションに使用しないことを強くお勧めします。
周波数領域についての素敵な点は、テクスチャのような非ローカルプロパティをキャプチャすることです。しかし、このグローバルな情報のために支払う価格は、位置情報が不足していることです。「この周波数はどこにあるのか」という言葉は非常に重要ではありません。この位置情報はです。セグメンテーションのためにはが重要です。どのピクセルがどのような "周波数" /テクスチャ/領域に属しているか知っていなければなりません... いくつかのローカリティ情報を保持するように設計された周波数ベースの記述子があります）。しかし、これらの手法は、「そのまま」実装することは容易ではありません。

ディープセマンティックセグメンテーションの方法を検討しましたか？ラベルの付いた画像がたくさんない場合は、Ning Xu, Brian Price, Scott Cohen, Jimei Yang, Thomas Huang, Deep GrabCut for Object Selection (arXiv 2017)のような準監督のものを見ることをお勧めします。