非常に深いニューラルネットのトレーニングエラー

Question

理論的には、ニューラルネットワークのレイヤー数を増やすにつれて、トレーニングエラーが減少する必要があります。しかし実際にはそれは一点まで減少し、増加する。なぜこれが起こるのですか（コースでAndrew Ngが述べたように）

Answer 1

訓練データを覚えているほど大きくなり、一般化能力を失ったためです。