ニコニコ動画のRSS一覧作成するGroovyスクリプト
最近全くGroovyを触っていなかったので、手慣らしにスクレイピングでニコニコ動画のRSS一覧を作成するスクリプトを書いてみた。[追記: 下のコードは古いので現在のニコニコ動画サービスには対応できていません。最新版はgithubに上げています。]
import org.cyberneko.html.parsers.SAXParser
def rankUrl = 'http://www.nicovideo.jp/ranking'
def kinds = ['総合':'fav', 'マイリスト':'mylist', '再生':'view', 'コメント':'res']
def spans = ['毎時':'hourly', 'デイリー':'daily', '週間':'weekly', '月間':'monthly', '合計':'total']
def rankHtml = new XmlSlurper(new SAXParser()).parse(rankUrl)
def groups = rankHtml.'BODY'.'DIV'.'DIV'.'TABLE'.'TR'.'TD'.'TABLE'.'TR'.'TH'.'A'
def groupMap = [:]
groups.each{groupMap[it.text()] = it.@href.toString().split('/')[6]}
//groupMap.each{println it.key + ', ' + it.value}
println '<HTML><BODY>'
for(kind in kinds){
for(span in spans){
println '<A HREF="' + rankUrl + '/' + kind.value + '/' + span.value + '/' + 'all' + '?rss=2.0">'
println '' + 'カテゴリ合算' + ' - ' + kind.key + ' - ' + span.key + '</A><BR>'
}
}
for(group in groupMap){
def groupUrl = rankUrl + '/fav/daily/' + group.value
def groupHtml = new XmlSlurper(new SAXParser()).parse(groupUrl)
def categories = groupHtml.'*'.'*'.'*'.'*'.'*'.'*'.'*'.'*'.'*'.'NOBR'.'A'
def categoryMap = [:]
categories.each{categoryMap[it.'DIV'.text()] = it.@href.toString().split('/')[6]}
// categoryMap.each{println it.key + ', ' + it.value}
println '<P>'
println '<H3>カテゴリグループ: ' + group.key + '</H3><BR>'
for(category in categoryMap){
for(kind in kinds){
for(span in spans){
println '<A HREF="' + rankUrl + '/' + kind.value + '/' + span.value + '/' + category.value + '?rss=2.0">'
println '' + category.key + ' - ' + kind.key + ' - ' + span.key + '</A><BR>'
}
}
}
println '</P>'
}
println '</BODY></HTML>'
出力結果はこういう感じになる。
実行にはCyberNeko HTML Parserが必要。
« 音楽ファイルに投稿者を設定する(ipum ver.0.3) | トップページ | Androidでのミュージックファイルアートワーク(カバーアート)仕様 »
トラックバック
この記事のトラックバックURL:
http://app.cocolog-nifty.com/t/trackback/18902/46756094
この記事へのトラックバック一覧です： ニコニコ動画のRSS一覧作成するGroovyスクリプト:
« 音楽ファイルに投稿者を設定する(ipum ver.0.3) | トップページ | Androidでのミュージックファイルアートワーク(カバーアート)仕様 »
コメント