クジラ飛行机

Pythonでスクレイピングや機械学習をやってみたい!そんなアナタのための一冊。サンプルコードを動かしながら、仕組みと使い方が理解できます。Python3対応。

内容詳細

Pythonによるスクレイピング&機械学習 開発テクニック BeautifulSoup,scikit-learn,TensorFlowを使ってみよう

松木雅幸

mattn

藤原俊一郎

中島大一

牧 大輔

鈴木健太

稲葉貴洋

みんなのGo言語【現場で使える実践テクニック】

佐々木 拓郎

るびきち

<b>Webクローラーの作り方をディープに解説! </b>

Webから任意の情報を引き出す「クローラー」技術の概要と、
クローラーの作成方法を解説します。
汎用的なクローラーの作成から、
ブログ・Twitter・Facebookなどターゲットごとの活用法まで、
データ収集効率を劇的にアップするクローラー技術をディープに解説します。 

■本書の「はじめに」より
本書はRubyでクローラーを開発・運用できるようにするための本です。
クローラーを使えば情報収集のスピードが速くなり、
最新情報をいち早く入手できるようになります。
本書を通じてクローラーを実際に開発・運用して、それを体感してください。

クローラーというのは、自動的にWebサイトを巡回して情報収集するプログラムのことです。
Google botなどの検索エンジンロボットが代表的ですが、
個人・ビジネスに関わらず、さまざまな場面で使われています。
そう聞くと難しそうに感じるかもしれませんが、
まったくそんなことはなく、小規模なクローラーはRuby初級者でも書けます。
実は、ファイルから情報を抜き出す普通のRubyスクリプトに、
たった1行加えるだけでクローラーに変身してしまいます。
もしかしたら知らず識らずのうちにあなたもクローラーを作っていたのかもしれません。
クローラーは身近な存在です。

■本書に掲載するクローラーサンプル
・Googleの検索結果を取得する
・ブログへのクローリング
・Amazonのデータを取得する
・Twitterのデータ収集
・Facebookへのクローリング
・画像を収集する
・YouTubeから動画を収集する
・iTunes Storeの順位を取得する
・Google Playの順位を取得する
・SEOに役立てる
・Wikipediaのデータを活用する
・キーワードを収集する
・流行をキャッチする
・企業・株価情報を収集する
・為替情報・金融指標を収集する
・郵便番号と緯度経度情報を取得する
・新刊情報を収集する
・荷物を追跡する
・不動産情報を取得する
・官公庁のオープンデータを活用する
・聞の見出しを集める

■目次
Chapter 1 10分クローラーの作成
Chapter2 クローラー作成の基礎
Chapter 3 収集したデータを分析する
Chapter 4 高度な利用方法
Chapter 5 目的別クローラーの作成
Chapter 6 クローラーの運用

内容紹介

Google、Twitter、Facebookからのデータ収集、iTunes Store、Google Playのランキング情報、企業・株価情報・為替情報・金融指標の取得、SEOやマネジメントに役立つ情報の収集etc…データ収集効率を劇的にアップするクローラー技術をディープに解説。

内容（「BOOK」データベースより）

佐々木 拓郎
本業は、Web系のシステムアーキテクト。企画から設計開発、運用まで幅広く担当。
最近はクラウド×自動化をテーマに、できるだけ楽することを考えている。
休日はワインを飲みながら、趣味でアプリを開発している。またAWSやRubyをはじめとする、
いろいろなコミュニティに出没している。

るびきち
RubyとEmacsとw3mとScreenとratpoisonとLinuxがないと生きていけないガチガチCUI系フリーライター。
テキストブラウザw3mで快適にWebを駆け回るために多数の個人用クローラーを開発。
主な著書に『Ruby逆引きハンドブック(C&R研究所)』『Emacsテクニックバイブル(技術評論社)』。
メルマガ『Emacsの鬼るびきちのココだけの話』毎週土曜日発行。

著者について

佐々木/拓郎
本業は、Web系のシステムアーキテクト。企画から設計開発、運用まで幅広く担当 

るびきち
CUI系フリーライター。多数の個人用クローラーを開発(本データはこの書籍が刊行された当時に掲載されていたものです)

著者略歴 (「BOOK著者紹介情報」より)

Rubyによるクローラー開発技法 巡回・解析機能の実装と21の運用例

Al Sweigart

相川 愛三

手作業だと膨大に時間がかかる処理を一瞬でこなすPython 3プログラムの作り方について学べる入門書。

退屈なことはPythonにやらせよう ―ノンプログラマーにもできる自動化処理プログラミング

Ryan Mitchell

嶋田 健志

黒川 利明

「Webスクレイピング」とは、インターネットからデータを機械的に集め、必要な情報を抽出するプロセスのこと。
検索エンジンだけでは限られた情報しか集められませんが、この技術を使えば、インターネット上の膨大な情報の中から本当に必要な情報を入手できます。
小売業、金融業をはじめ多くの業界で情報収集に活用され、アカデミックでも広い分野で使われ注目されています。
本書は、前半でWebスクレイパーとクローラの基礎をていねいに解説し、後半でOCRを使った情報抽出や、JavaScript実行、Seleniumによるインタフェース使用やテスト自動化、自然言語処理などの高度なトピックに加えて法律面の解説など、Webスクレイピングを実際に行うために必要なプログラミングテクニックとテクノロジー全般を紹介します。Python 3.x対応。

「Webスクレイピング」とは、インターネットからデータを機械的に集め、必要な情報を抽出するプロセスのこと。検索エンジンだけでは限られた情報しか集められませんが、この技術を使えば、インターネット上の膨大な情報の中から本当に必要な情報を入手できます。小売業、金融業をはじめ多くの業界で情報収集に活用され、アカデミックでも広い分野で使われ注目されています。本書は、前半でWebスクレイパーとクローラの基礎をていねいに解説し、後半でOCRを使った情報抽出や、JavaScript実行、Seleniumによるインタフェース使用やテスト自動化、自然言語処理などの高度なトピックに加えて法律面の解説など、Webスクレイピングを実際に行うために必要なプログラミングテクニックとテクノロジー全般を紹介します。Python3.x対応。

Ryan Mitchell(ライアン・ミッチェル):ボストンを拠点とするLinkeDrive社のソフトウェアエンジニア。社内用APIおよびデータ分析ツールを開発している。オーリン工科大学卒業、現在はハーバード大学Extension Schoolの修士課程を履修中である。LinkeDrive社に入社する前は、Abine社でスクレイパーとボットの構築を担当していた。また、定期的にWebスクレイピングプロジェクトのコンサルティングを金融業界と小売業界向けに行っている。

ミッチェル,ライアン
ボストンを拠点とするLinkeDrive社のソフトウェアエンジニア。社内用APIおよびデータ分析ツールを開発している。オーリン工科大学卒業、現在はハーバード大学Extension Schoolの修士課程を履修中である。LinkeDrive社に入社する前に、Abine社でスクレイパーとボットの構築を担当していた。また、定期的にWebスクレイピングプロジェクトのコンサルティングを金融業界と小売業界向けに行っている

黒川/利明
1972年、東京大学教養学部基礎科学科卒。東芝(株)、新世代コンピュータ技術開発機構、日本IBM、(株)CSK(現SCSK(株))、金沢工業大学を経て、2013年よりデザイン思考教育研究所主宰。情報規格調査会SC22 C#、CLI、スクリプト系言語SG主査として、C#、CLI、ECMAScriptなどのJIS作成、標準化に携わっている。現在、日本規格協会標準化アドバイザー、町田市介護予防サポータ、カルノ(株)データサイエンティスト、日本マネジメント総合研究所LLC客員研究員

嶋田/健志
主にWebシステムの開発に携わるフリーランスのエンジニア(本データはこの書籍が刊行された当時に掲載されていたものです)

PythonによるWebスクレイピング

加藤 耕太

Webデータ収集・解析の技法を基礎から実用まで徹底解説。

Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-

柴田 淳

今、最も熱いプログラミング言語、それがPython ※この電子書籍は固定レイアウト型で配信されております。固定レイアウト型は文字だけを拡大することや、文字列のハイライト、検索、辞書の参照、引用などの機能が使用できません。 Python入門書のデファクトスタンダードが4年ぶりに大改訂。 近年、Pythonの利用が、機械学習、AIなどの科学技術分野へ大きく広がっている現状を踏まえて、すべてのパートに手を入れいくつかの新章を追加しました。 次の10年を担うPythonプログラマを養成するための一冊。

タグ：スクレイピングの検索結果

Pythonによるスクレイピング&機械学習開発テクニック BeautifulSoup,scikit-learn,TensorFlowを使ってみよう

みんなのGo言語【現場で使える実践テクニック】

Rubyによるクローラー開発技法巡回・解析機能の実装と21の運用例

退屈なことはPythonにやらせよう ―ノンプログラマーにもできる自動化処理プログラミング

PythonによるWebスクレイピング

Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-

みんなのPython 第4版

タグ：スクレイピングの検索結果

Pythonによるスクレイピング&機械学習 開発テクニック BeautifulSoup,scikit-learn,TensorFlowを使ってみよう

みんなのGo言語【現場で使える実践テクニック】

Rubyによるクローラー開発技法 巡回・解析機能の実装と21の運用例

退屈なことはPythonにやらせよう ―ノンプログラマーにもできる自動化処理プログラミング

PythonによるWebスクレイピング

Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-

みんなのPython 第4版

Pythonによるスクレイピング&機械学習開発テクニック BeautifulSoup,scikit-learn,TensorFlowを使ってみよう

Rubyによるクローラー開発技法巡回・解析機能の実装と21の運用例