jojonさんのレビュー一覧
投稿者:jojon
| 2 件中 1 件~ 2 件を表示 |
Rubyによるクローラー開発技法 巡回・解析機能の実装と21の運用例
2015/01/31 14:04
具体例が豊富でわかりやすい
2人中、2人の方がこのレビューが役に立ったと投票しています。
既製のソフトウェアで目的を果たせるのであれば、わざわざクローラーを自作せずにそれを使用すればいいという考えで、最初に「GNU Wget」というソフトウェアの使い方などが説明されています。そして、その上でなおオリジナルのクローラーを自作したいという人に向けて、「Anemone」や「Nokogiri」といったRubyのライブラリを使用して、様々なWebサイトをサンプルにクローリングやスクレイピングについて具体的に解説されています。
使用している言語はRubyですが、最初の方で簡単にRubyの基礎について触れられており、他の言語の経験があればRuby未経験でも本書で記載されているサンプルコードをある程度苦にならずに読み進めていくことができると思います。環境構築やライブラリのインストールなどについて、WindowsとMacの両方の説明が行われているのにも好感が持てました。
クローラーとは何かという基礎的なことから、クローリング対象のサイトに負荷をかけないようにするにはどうしたらいいか、クローリングの効率化および高速化をどのようにして実現するかといったことまで幅広く記載されており、興味深く読むことができました。
| 2 件中 1 件~ 2 件を表示 |
