カフェ、層にカスタムウェイトを設定する

Question

私はネットワークを持っています。 1つの場所で私は連結を使用したい。この写真のように。

残念ながら、ネットワークは訓練しません。なぜ私が連動して体重を変更したいのかを理解する。 FC4096のすべての値が1になり、FC16000のすべての値が最初に0になることを意味します。

私はFC4096が57％の精度を得られることを知っています。学習率10^-6では、連結層が学習しなかった理由を理解できます。

質問は、すべての値をFC4096から1に、すべての値をFC16000から0にそれぞれ設定するにはどうすればよいですか？あなたがFC16000の上に"Scale"層を追加し、0にそれをinitができ

Answer 1

：

layer { 
    name: "scale16000" 
    type: "Scale" 
    bottom: "fc16000" 
    top: "fc16000" # not 100% sure this layer can work in-place, worth trying though. 
    scale_param { 
    bias_term: false 
    filler: { type: "constant" value: 0 } 
    } 
    param { lr_mult: 0 decay_mult: 0 } # set mult to non zero if you want to train this scale 
}