2006-04-24 21:31:33 (月)
yahooやgoogleなど、ページをクロークしているが
そのクローク回数に対して、サーチエンジンからの訪問回数は、いったいどうなっているのだろう？
クローク回数は、調査対象がCGIであれば、ＣＧＩで取得できるが、htmlの場合できない。
方法としては、SSIで行うか、apacheのアクセスログからになる。
----
現在、このサーバーでは、アクセスログに、AGENTとREFERERも、保管しているので、apacheのアクセスログで集計を行ってみる。
−−−−
４月２３日分のデータ集計結果
総アクセス数 68408
agent毎
- -- 723 ** 1.06
msnbot/1.0 (+http://search.msn.com/msnbot.htm -- 773 ** 1.13
Mozilla/5.0 (Macintosh; U; PPC Mac OS X; ja-j -- 797 ** 1.17
Mozilla/4.0 (compatible; MSIE 5.5; Windows 98 -- 803 ** 1.17
Mediapartners-Google/2.1 -- 1050 ** 1.53
Mozilla/4.0 (compatible; MSIE 6.0; Windows 98 -- 2039 ** 2.98
Mozilla/5.0 (compatible; Yahoo! Slurp; http:/ -- 5140 ** 7.51
Mozilla/4.0 (compatible; MSIE 6.0; Windows NT -- 26287 ** 38.43
Mozilla/5.0 (compatible; Googlebot/2.1; +http -- 27569 ** 40.30
refer毎
www.kklib.com/bbs_ -- 54 ** 0.08
search.msn.co.jp/r -- 62 ** 0.09
www.kklib.com/samp -- 86 ** 0.13
www.kklib.com/down -- 123 ** 0.18
www.google.com/sea -- 125 ** 0.18
www.google.co.jp/s -- 387 ** 0.57
72.14.203.104/sear -- 474 ** 0.69
cache.yahoofs.jp/s -- 654 ** 0.96
search.yahoo.co.jp -- 4388 ** 6.41
www.kondo-net.gr.j -- 22114 ** 32.33
- -- 39104 ** 57.16
−−−−
Googleからのクロークは、27569回で全体の40.30％のアクセスになっている。
Googleからのアクセスは、125+387＝512で0.75%である。
yahooからのクロークは、5140回で全体の7.51％のアクセスになっている。
yahooからのアクセスは、4388で6.41%である。
msnからのクロークは、773回で全体の1.13％のアクセスになっている。
msnからのアクセスは、62で0.09%である。
今回、クローク回数に対して、サーチエンジンからの訪問回数を問題としているので
サーチエンジンからの訪問回数 ÷ クローク回数 を求めると
Googleは
512 ÷ 27569 ＝ ０．０１８６ （１．８６％）
yahooは
4388 ÷ 5140 ＝ ０．８５３７ （８５．３７％）
msnは
62 ÷ 773 ＝ ０．０８０２（８．０２％）
−−−−