Nutch：URLのdb_unfetched状態の基準

Question

URLがdb_unfetchedフェーズになった場合。 crawlurlfilter.txtを満たさないURLもdb_unfetched状態になります。

1. たて注入されたURL、
2. フェッチイマイチURL、
3. 何らかの例外

にフェッチすることができませんでしURL：

次のURLをDB_ unfetchedとしてマークされている

Answer 1

crawlurlfilter.txtは、URLの取得に適格ではありません。したがって、URLはdb_unfetchedのままです。