読者です 読者をやめる 読者になる 読者になる

おしい県でWebに携わって働く人のブログ

基本的にはIT&Web界隈に関する役に立ちそうなことをまとめていきます。

「Webスクレイピング」に関する参考記事へのリンクを我武者らにまとめてみた。リンク31個+スライド5個。

プログラミング全般

f:id:lord_cashew:20140701160947j:plain

そろそろ本気で「Webスクレイピング」に取り組まなければならない気がする今日この頃、Webスクレイピングに関してググって見つけた参考記事へのリンクをシンプルに羅列してまとめてみました。

ちなみに「Webスクレイピング」については、以前書いた記事「Webスクレイピングとは何ぞや?という疑問が浮かんできたので調べてみた」を参照してみて下さい。

 

参考記事リンク31個まとめ

(PHPでのスクレイピングとか)

初めてのスクレイピング - しぶてぃーぶろぐ

» PHP初心者がやってみた!スクレイピング入門|inimoni

PHPでphpQueryを使ってWebスクレイピングしてみる - omiya6048's blog

誰でもスクレイピング!DOM要素を引っこ抜くSimple HTML Dom-ITかあさん

ウェブ上の必要なデータを抽出する方法-スクレイピング- | PHPサンプル実験室

PHPでのスクレイピングに役立つライブラリ - (DxD)∞

phpによるスクレイピング処理入門

PHP Simple HTML DOM Parserを使ったWebスクレイピング入門 - Qiita

PHP Simple HTML DOM Parserの使用方法 - Webスクレイピング ライブラリ

PHPでスクレイピング【Goutte vs. Simple HTML DOM Parser】 - Qiita

htmlSQLよりアツい!?jQueryみたいにセレクタでHTMLをparse(解析)する「PHP Simple HTML DOM Parser」 | ITキヲスク

PHP:クッキーが必要なサイトをスクレイピングする方法 | マイヤーの開発ブログ

リニューアルを効率化するスクレイピング処理をPHPで実行する方法 | nezu.log

DOM操作・スクレイピング用おすすめライブラリ『phpQuery』の基本的な使い方:便利で人気のjQueryのPHP実装 | Ouka Studio

 

(Rubyでのスクレイピングとか)

Nokogiri を使った Rubyスクレイピング [初心者向けチュートリアル] - 酒と泪とRubyとRailsと

Ruby - Nokogiriでスクレイピング - Qiita

Rubyを使ったウェブ・スクレイピングの基礎を学ぶ

nokogiriを使ったスクレイピング入門 - 文系学生のプログラミング入門

Rails4でサイト構築をする-スクレイピング機能編(Nokogiri) | TechRacho

Ruby関連HTML/Webスクレイピング・ライブラリまとめ 2014年版 | Idea, Design, Engineering, Architecture, etc

Railsでスクレイピングの際に画像サイズを調べてごにょごにょする。 | Workabroad.jp

楽々スクレイピング! Ruby Mechanizeの使い方 -- ぺけみさお

RubyでYahooファイナンスをスクレイピング - There is no free lunch

Ruby - Google検索の鉄道運行情報をスクレイピングする - Qiita

 

(その他でのスクレイピングとか)

NodeとRubyとPythonでスクレイピング - Qiita

asyncioを用いたpythonの高速なスクレイピング - HackerNews翻訳してみた

PythonとかScrapyとか使ってクローリングやスクレイピングするノウハウを公開してみる! - orangain flavor

HaskellでWebスクレイピング - Haskell Advent Calendar 2012

Google Apps Scriptでスクレイピングする方法 - Qiita

 

(スクレイピングの便利ツールとか)

ブラウザ操作で簡単にスクレイピングAPIが作れる「kimono」 - それはBooks

クリックだけであらゆるサイトをスクレイピングできるWebサービス「kimono」が凄い

 

参考スライド5個まとめ