hatakazu93 https://blog.hatena.ne.jp/hatakazu93/ エンジニアリングとお金の話 https://hatakazu.hatenablog.com/ 技術 webサイトをスクレイピングする際はmechanizeを使用しているが、ログイン処理等にjavascriptを使用してゴニョゴニョしているサイトの場合は、行き詰ってしまう事が多い。 今までその様なサイトは諦めていたが、どうにかスクレイピングする方法が無いかと調べた結果、以下の２つで実現出来る事がわかった。 ① seleniumを使用する ② Phantom JSを使用する どちらの方法も擬似的なブラウザオブジェクトを使用してjavascriptの処理を行う事が可能である。今回は操作が簡単なseleniumを使用した方法について説明する。 １.seleniumとは Webアプリケーション用テスト… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fhatakazu.hatenablog.com%2Fentry%2F2012%2F06%2F10%2F083928" title="【技術】mechanizeに変わる方法を考えてみた - エンジニアリングとお金の話" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> http://cdn-ak.f.st-hatena.com/images/fotolife/h/hatakazu93/20120701/20120701064546.jpg Hatena Blog https://hatena.blog 2012-06-10 08:39:28 rich https://hatakazu.hatenablog.com/entry/2012/06/10/083928 1.0 100%