Akiniwa https://blog.hatena.ne.jp/Akiniwa/ 忘れないようにメモっとく https://akiniwa.hatenablog.jp/ scrapy python crawler そうだクローラつくろう 研究テーマを探しつつ、なんとなくネットワークが面白そうと思っていた今日この頃。 研究で扱うのは、通信技術のネットワークではなくて、ノードとリンクに一般化したやつ。 「スモールワールド(small world phenomenon)」や「六次の隔たり(six degrees of separation)」など、一般的に知られてる部分もあって、経済現象とか感染症の拡散の理論にも適用できる(と言われている)ので、関連する分野がめちゃくちゃ広い。 ただ、実際のデータを無料で手っ取り早く集めるとなると、web上のドキュメントを解析するのが楽そう。ということで、クローラをつくってみ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fakiniwa.hatenablog.jp%2Fentry%2F2013%2F04%2F15%2F001411" title="pythonのフレームワークでサクッとクローラをつくる。&quot;Python Framework Scrapy&quot; - 忘れないようにメモっとく" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2013-04-15 00:14:11 rich https://akiniwa.hatenablog.jp/entry/2013/04/15/001411 1.0 100%