１. 検索力調査について

　 検索力調査は1996年1月から開始しました。その当時はまだコンテンツが少なく、検索してもあまり見つからなかったものです。そこで、どれ位のデータが入っているかを調べるために、ロボット型やディレクトリ型の検索サイトを検索しレポートにまとめていました。それが検索力という形になったのは1996年9月です。検索数をベースに海外検索サイトを対象にしたものです。1997年3月末にgooが検索サービスを開始したのを機に、日本語検索サイトの検索力調査を毎週実施し、公開してきました。4年以上続いたことになります。

　 インターネットによる情報発信が増加するにつれて、ロボット型検索サイトのデータ量は増大し、検索すると読みきれないほどの検索結果が得られるようになりました。検索結果をランキングしてますが、実際は大変難しいことです。各検索サイトのランキングを評価することは、少なくとも2000年までは不可能でした。5月7日に検索の視点に、ロボット型検索がページ検索に加えてサイト検索もできるようになったことを記しました。

　 これを受けて長年続けてきた検索力調査をバージョンアップすることにしました。以下、その背景、検索力を算出する要素として、検索数、サイト検索、関連サイト検索、そして総合評価方法、今後の検索力調査について述べます。

２. ロボット型の進化：ページ検索に加えサイト検索可能

　 Web検索の有用性に気づいた人は、無料のWeb検索サービスを1日に何十回と検索しています。現代の情報通はWeb検索通です。そのような人は検索キーを少なくとも3個以上使うAND検索を使います。その場合には、データ量、すなわち検索数が重要になります。したがって検索数調査は今後も継続します。

　 ロボット型がページだけを処理しているため、サイトのトップページがランキングの上位に表示されず、サイト検索に較べて短所であると長い間指摘されていました。それを補うために、フレッシュアイが1999年4月に「ずばリンク」を開始しています。企業名、自治体名、大学名などの検索であれば、検索結果の先頭に表示するシステムです。gooの「ぴったりgoo」、InfoseekJの「ジャストシーク」、LycosJの「公式サイト」「情報源」、InfoNavigatorの「ダイレクトリンク」など、名前は異なりますが、同種のシステムです。この例外処理は当たり外れが大きく、サイト検索対応の暫定版とみなせます。

　 2000年8月に日本語検索サービスを始めたFastSearchやGoogleはデータベースの構成自体がサイト検索向きになっており、それを受けてgoo、ODIN、4月にサービスを開始したNexearchなど、ディレクトリ型のサイト検索よりも優れた結果を示すものが登場してきました。

　 そこで新しい検索力調査は、1)従来の検索数調査、2)あるサイトが検索できるかどうかを調べるサイト検索調査、3)検索の視点#20で行ったキーワードからサイトを見つける関連サイト検索調査、の3項目から求めます。

３. 検索数調査

　 この調査はサーチエンジンの性能を客観的に得るために始めました。海外検索サービスは96年9月から、日本語検索サービスは97年3月から、毎週日曜日の朝に実施し、そのデータを公表しています。調査は非常に簡単な方法をとっています。各検索サイトに対して15種類のキーワードで検索し、検索結果に表示される検索数をベースにします。

　 2001年5月13日に調査したものを表１に記します。横に検索サイト(略号)、縦にキーワード、その交点に検索数を示します。キーワードの検索数は、例えばgooの場合、グルメの818,000からvrmlの31,000と大きく変化しますので、15種類の検索数を合計したものを比較しても意味がありません。

　 表１　検索数調査データ(単位:1,000)　調査日：2001年5月13日

　 そこで、最大の検索数を示すものを100として、その相対的な値を求めます。その結果を表２に示します。表２のイントラネットで説明しますと、表１で最大の検索数はGoogleの85,000ですので、それを100にします。gooは100×77÷85＝91、kensaku.orgは100×58÷85＝68、などと計算していきます。表２のD:合計は15キーの合計を示します。そして、最大値の1,232を100に調整したものを求めます。E:検索数指数は従来の検索力と同じものです。

　 表２　検索数指数　調査日：2001年5月13日

　 日本と海外とあわせて20検索サイトありますが、更新するのは約15ありますので、毎週15×15＝225回の検索を手動で実施しています。最初のころは検索数を紙に筆記していましたが、最近は直接エクセルに入力しています。終了後、エクセルで表２の計算を行ないます。なお、調査用の検索ページを独自に作成し、それを使っています。

　 資料⇒視点:検索可能性をあらわす検索力について 1996.9.16

４. サイト検索調査

　 サーチエンジンの発展の流れからいえば、このサイト検索は次の関連サイト検索よりも先にクリアすべきものです。検索の視点#20はサイト検索調査を飛ばしてしまいました。#20で用いたのと同じサイト名で検索し、検索結果の順位を求めたのが表３です。表で、Nは4位以上、ぴはぴったりgoo、ダはダイレクトリンク、ずはずばリンク、などを示します。

　 表３　サイト検索調査の順位表と指数　調査日：2001年5月9日

　 この調査結果から指数を求めるのですが、誰でも使えるように非常に簡単な方法を採用しました。各検索サイトごとに、20の結果からA:1位の数、B:2位の数、C:3位の数を求めます。順位間に重みをつけるため、1位5点、2位3点、3位1点にして、各検索サイトのD:得点を求めます。そして最大値を100に基準化したものをE:サイト検索指数とします。

　 この結果から、指数80以上は5検索サイト、それを70以上にすると8検索サイトがクリアしています。もちろん調査キーによるわけですが、ロボット型の弱点が相当克服されてることがわかります。ロボット型で対応できない場合に、ページ検索結果の前にディレクトリのサイト検索結果を表示する場合があります。純粋にページ検索ではないですがここではそれを順位に採用しました。

５. 関連サイト検索調査

　 この関連サイト調査は「検索の視点#20：検索結果をもとにした日本語サーチエンジンの評価(2001.5.7)」と内容は同じです。得点の集計や指数化は前述のサイト検索調査と同じですので、説明は省きます。gooとGoogleがよい成績を得ました。ページ検索でサイト検索に対応してないところは悪い結果になり、差が大きく開いてしまいました。大変難しい検索ですが、まずサイト検索をクリアし、それからこの関連サイト検索をクリアすることが一つの目標になるのではと思います。

　 表４　関連サイト検索調査の順位表と指数　調査日：2001年5月3日

６. 新しい検索力の算出法

　 新しい検索力は以上求めた3種類の指数の和を100に基準化して求めます。その流れを表５にまとめました。従来は検索数だけでしたが、それにサイト検索と関連サイト検索を加えたものです。検索数の順位がよいとか、サイト検索の順位がよいとか、あるいは関連サイト検索の順位がよいとか、利用する分野や検索に対する習熟度により異なるかも知れません。今後は、検索デスクの配置はこの検索力をベースにします。

　 表５　検索力の算出　調査日：2001年5月13日

　 結果から、検索サイトが3つのグループに分かれました。トップグループはgooとgoogleです。80点以上をAとすれば、3項目ともAAAです。次のグループは、FastSearch、ExciteJ、Nexsearch、ODiN、InfoseekJ、AltaVista、の6検索サイトで、検索力62.7から51.1までの狭い範囲に入っています。このグループのサイト検索指数は71以上ありますので、サイト検索指数が大きく影響しています。最後は、LycosJ、kensaku.org、InfoNavigator、FreshEyeですが、まだページ検索のなかにサイト検索が入っていないようです。特に、関連サイト検索がかんばしくなかったのが響いています。

７. 今後の検索力調査について

　 検索力調査ですが、1回の調査に必要な検索回数は、検索数 15×15＝225回、サイト検索 20×12＝240回、関連サイト検索 20×12＝240回、となります。今までに較べて約３倍になります。

　 したがって、検索数は従来通り毎週調査しますが、サイト検索と関連検索サイトに関しては月1回の更新にしたいと思います。もちろん、各検索サイトのデータ更新やシステム変更は頻繁に行われていますので、大きな変化が認められたときは随時行います。それに難しい問題ですが、サイト検索調査や関連サイト検索調査で使う調査キーワードや調査サイトは少しづつ入れ替えたいとも思っています。