dkfj https://blog.hatena.ne.jp/dkfj/ プログラマでありたい https://blog.takuros.net/ クローラー／スクレイピング Advent Calendar 2014の6日目です。あと、全部俺Advent Calendarも開催中です。 リクエストがあったので、Mechanizeを使ったスクレイピング方法についてです。Mechanizeは、対話型の処理を得意とするスクレイピングの補助ツールです。対話型とは、例えばIDとパスワードを使ってログインするようなサイトなので、それぞれ項目に入力して次のページに遷移するような行為です。 Mechanizeのサンプルソース 下記は、Amazonアソシエイトサイトから売上を取得するサンプルです。 require 'mechanize' uri=URI.p… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fblog.takuros.net%2Fentry%2F2014%2F12%2F06%2F235232" title="Ruby+Mechanizeで対話型のスクレイピング - プログラマでありたい" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> http://ecx.images-amazon.com/images/I/51qDobozaNL.jpg Hatena Blog https://hatena.blog 2014-12-06 23:52:32 rich https://blog.takuros.net/entry/2014/12/06/235232 1.0 100%