ウェブサイトからファイル（直接リンクのないファイルを含む）をダウンロードするツールですか？

Question

私はhttps：//.com//のようなURLからファイルをダウンロードするソリューションを探しています。私はwgetについて学び、非常に多くのオプションを試しましたが、インデックスファイルや任意の並べ替えで直接リンクを持たないファイルはダウンロードしないことに気付きました。

たとえば、https://somesites.com/myfolder/myfiles/からすべてをダウンロードしたいとします。
"myfiles"ディレクトリの下にindex.htmlがあり、インデックスで参照されリンクされている多くのhtmlファイルとカップルディレクトリがありますが、sample123.htmlやsample456.htmlなどの他のhtmlファイルもいくつかあります。

wgetコマンドを実行すると、すべてのサンプルが正常にダウンロードされますが、sample123.htmlとsample456.htmlは、よく知られたよく知られているオプションをほとんど使用しています。

直接リンクの有無にかかわらず、https://somesites.com/myfolder/myfiles/にあるすべてのファイルを取得するツールはありますか？

また、http URLに対してlftpを試しましたが、ダウンロード結果はずっと少ないファイルでした。

私はこのためにスタックオーバーフローを見ましたが、推奨されるコマンドは直接リンク（wgetによる）でファイルをダウンロードするものです。

Answer 1

あなたがしたいことはできませんし、セキュリティ上の問題があります。たとえば、フォルダ内に機密データのあるファイルがあり、そのファイルがどこにもリストされていないとします。あなたはそのファイルをダウンロードするツールを求めています。

あなたがしたいことをまったく防ぐために、セキュリティオプションとしてHTTPサーバーのディレクトリリストを無効にすることは常に推奨されます。