Simple HTML DOM PHPを使用してページをクロールする方法は？

Question

this pageからデータを収集しています。私はシンプルなHTML DOMパーサーを使用しています。私は次のページからデータを収集したいと思います。問題は、次のページに新しいリンクがないため、リンクをループできないということです。私はそれがJavascriptによって行われると思います。次のページに移動してそこからデータを収集するにはどうすればよいですか？

`// array to store scraped links 
    $links = array(); 
    // crawl the webpage for links 
    foreach($html->find("a") as $link){ 
     array_push($links, $link->href); 
    }` 

上記のコードでは、ページ上のリンクのみが見つかります。ページ番号1,2,3 ...にはリンクがありません。

Answer 1

このタスクにPhantomJS/CasperJSを使用しようとしましたか？これらは、ユーザーの要求をシミュレートしたり、Webページをスクラップしたりするのに非常に適しています。