2011年7月25日月曜日

クローラ作る

1,やり方

SummerWind - クローラーと探索アルゴリズム

Crawler Guide of Hyper Estraier Version 1 (Japanese)

2,アイディア
 ○ ただ単に、移動した先を表示するだけ。 
 ① 会社をつなぐ。
 ② クローラが動いた軌跡をたどる。
 ③ 会社から何ステップでどこのサイトまでいけるか競う。
 ④ google api使って何かする。

Techie Blog: Google AJAX Search API で IPアドレスから位置情報を取得
公式ブログにサイト閲覧者のIPアドレスか

Google Web API をコールするクライアントを作る
リンクチェック

次のサンプルは指定したWebページにリンクしているページ数の推移を調べるためのサンプルです。

0 件のコメント:

コメントを投稿