ヘッドレスChromeでスクレイピングする例

JavaScript スクレイピング

ヘッドレス Chrome でスクレイピング。かなり手軽にやれることがわかった。

簡単な例をいくつか書いてみた。

準備は npm install chromy するだけ。

Google 検索して、タイトルとURLを取ってくる

Amazon 検索して、本のタイトルを取ってくる

Instagram ハッシュタグで検索して、画像のURLを取ってくる