リカレントニューラルネットワークの重み

Question

以下のようなRNNを考えてみましょう。

このネットワークには、U、V、Wの重みがあり、右側のグラフのように展開できます。

この展開されたネットワークでは、複数の重み行列、Us、VsおよびWsが論理的に存在します。

展開されたグラフの各重み行列は、隠れノードごとに個別または一意であることを知りたいと思います。

Answer 1

それぞれの隠れノードで一意ではありません。実際、これはRNNがシーケンス長に依存することを避ける方法です。