2008-01-12 AjaxなサイトをScrapingする方法 memo 今はこのような手法を使っています。 適当なブラウザでScrapingしたいサイトを開く Wireshark(Ethereal)を立ち上げる パケット解析をしながら、Ajaxさせる HTTPポートの通信内容を見ながら、Scrapingする もっと賢いやり方があるかもしれませんが、今はこうしてやっています。 これで、AjaxなサイトもScrapingできますよ。 でも、Flashなサイトとかはどうすればいいのかわからぬ。