Goで動的Webサイトをスクラップする方法は？

Question

NodeJSを使用すると、PhantomJSを使用して動的Webサイトをスクラップすることができます.Pythonでは、この作業を行うためにSeleniumを使用できます。

GoLangではどうですか？

Answer 1

はそれを行くLANGセレンウェブドライバ

https://github.com/knq/chromedpに試してみて：パッケージchromedpは（外部依存せずに、すなわち、セレンをブラウザ（クローム、エッジ、サファリ、アンドロイドなど）を駆動するより速く、簡単な方法で、 PhantomJSなど）をChromeデバッグプロトコルを使用して実行します。

https://github.com/sourcegraph/go-selenium：ゴー

https://github.com/tebeka/seleniumのためのセレンwebdriverをクライアント：セレン/ webdriverをクライアントゴー

---

静的クローラの参考のために

あなたはgithub.com/PuerkitoBio/gocrawlライブラリを使用したり、カスタム・クローラ、基本的な考え方を建てことができますここにはhttps://tour.golang.org/concurrency/10です。