質問: htmlの検索と解析 ホームページやblogを自分でつくっている人は非常に多くいますが、 特定の志向をもったサイトとデザインの相関を調べてみたいと思っています。 そこで、ホームページやblogを指定されている背景色で分類したいと考えたのですが。 htmlのタグやcssを解析することで背景色のデータだけを抜き出す ようなことを考えています。 (1)検索エンジンの検索結果のリンクをたどって (2)取得したhtmlなどを解析して (3)背景色を抜き出す ような作業をある程度自動で行うためのツールや ツールを作るための方法としては、どんなものが いいでしょうか? 例えば、htmlをリンクを一括ダウンロードするようなツールで htmlを収集して、それらのhtmlをgrepなどで解析したらいいかと 思うのですが・・・・ (考えてみたらメールアドレスを収集するロボットみたいな ことをしたいようにも思えるのですが) 検索⇒データ分析⇒解析をできるだけ自動的に行うには どういう方法がいいでしょうか。 なにかアイディアや、方法に関して示唆をいただければ 幸いです。
回答: 例えば、vbscriptからieを使って以下のように背景色を取り出すことができます。(currentstyleを使っているのがミソ) createobject("internetexplorer.application") を使えば、vbscriptに限らず適当なマイクロソフト系のソフトで同じように処理できます '--------------------------------------------------------------- dim ie set ie = wscript.createobject("internetexplorer.application") ie.navigate ("http://blog.livedoor.jp/nao_oikawa/") while ie.busy: wend while ie.document.readystate <> "complete": wend msgbox(ie.document.body.currentstyle.backgroundcolor) ie.quit