日々精進

新しく学んだことを書き留めていきます

node.jsのスクレイピングはCPUヘビーな処理

jsdomを使ってスクレイピングする処理のパフォーマンスを計測してみた。
Requestにかかった時間:200msぐらい
Request以外にかかった時間(jsdomでDOM構築一回400ms、jQueryスクレイピング200ms):1000msぐらい
ということでスクレイピングはCPUヘビーな処理なので、node.jsでやらない方がいいですね。
jQueryでテキストを抽出する処理だけで200msぐらいかかるとは意外。。