[Tips][ruby]スクレイピング

レコチョクの「注目ニューリリース」をスクレイピング


*ruby
*hpricot

require 'rubygems'
require 'hpricot'
require 'open-uri'
require 'kconv'

url = "http://recochoku.jp/"
doc = Hpricot( open(url).read )


(doc/"div.txt12col").each do |row|
  (row/"div.infocol").each do |col|
    puts (col/"h4").inner_text.toutf8
    puts (col/"p.album").inner_text.toutf8
    puts (col/"dl"/"dd").inner_text.toutf8
    puts (col/"p"/"span").inner_text.toutf8
    puts "================================================"
  end
end

嵐
「Love Rainbow」
2010.09.08
フジテレビ系月9ドラマ「夏の恋は虹色に輝く」主題歌。嵐の五人が描く七色の超直球ラブソング!
================================================
EXILE
「もっと強く」
2010.09.15
映画「THE LAST MESSAGE 海猿」主題歌
================================================
JUJU
「First Love」
2010.09.29
1度しかない特別なキモチ・・・宇多田ヒカルの名曲を秀逸カヴァー。
================================================
the GazettE
「Red」
2010.09.22
年末の大舞台ドームへ!!切ない悲恋を描いた“赤い糸=Red”解縛!!※こちらの楽曲は9月11日配信です。
================================================
少女時代
「GENIE」
2010.09.08
待望の配信スタート!話題No.1のK-POPガールズグループ、遂に日本デビュー!
================================================
倖田來未
「好きで、好きで、好きで。 」
2010.09.22
本人出演 Kracie「いち髪」TV-CFソング
================================================
KG
「どんなに離れても duet with AZU」
2010.09.29
いつまでも時間を止められたら…有線1位の今年最強の遠恋歌!
================================================
KE$HA
「テイク・イット・オフ」
2010.05.12
女豹史上最もグリッターでダーティで脱いでるNEWシングル
================================================