URLスクレイピングタスクを自動化するにはどうすればよいですか？

Question

私は17kのURLのハイパーリンクのリストを持つExcelシートを持っています。それぞれのリンクをクリックして、結果のWebページからExcelシートにデータをスクラップする作業を自動化する必要があります。 OSXのMacでこれを行う最高の無料の方法は何ですか？

Answer 1

この目的のためにiMacrosをfirefoxに使用することができます。それは無料で非常に強力なWebスクレイピングアドオンです。 まず、Imacrosの基本的なスクリプトをいくつか学ぶ必要があります。

Answer 2

FWIW Chrome用Kantuを使用していますが、これはオープンソースのiMacros alternative Chrome拡張子read CSV filesです。だからあなたのリンクリストを読んだり、ウェブサイト上で何をする必要があれば何でもやります。

でも、このような質問はhttps://softwarerecs.stackexchange.com/

でお願いします。