ロボット型検索エンジン総合評価結果
検索デスクの評価では1位のinfoseekですが、ここでの評価は9位です。こんなに差があるとは思いませんでした。AND検索の能力が１２の検索エンジンの中で最下位と極端に低いのが１つの理由です。１万件もヒットしてもすべてを見ることはできませんから通常はもっと絞り込んでから使うわけで、AND検索が最下位ということは検索力が最下位であると言っても良いと思います。
また検索デスクが正しければ１位であるはずの、単語検索も５位にすぎません。これにはからくりがあります。infoseekで、いずれかの語を含むで、１つの単語、「デュアルCPU」を検索すると、CPUは無視されて、「デュアル」を検索したのと同じ結果になりヒット件数がやたらと多くなります。他と条件が異なってしまうので、僕の評価では、インフォシークのデフォルトである、「すべての語を含む」になっています。しかし、検索ディスク経由でinfoseekを利用すると、「いずれかの語を含む」の方のオプションが選択されます。というわけで、検索デスクがインフォシークの罠にはまったというよりは、わざと、インフォシークが１位になるようにしてあると思えてきます。あるいは、infoseekが、検索デスクが使っている評価用のキーワードに過剰適応しているという可能性もあります。
| 最近気づいたのですが、infoseekではAND検索の場合は、ヒット件数が一定数を超えると、40000から始まる加工された値を返すようになりましたね。たとえば、38000件を超えると、y=40000+rnd()*11000みたいな感じの値を返しているようです。OR検索（いずれかのワードを含む）の場合には、実際の値を返しているように見えるのですが、キーワードを引数として、ヒット数を返す関数をhit()として表すと、hit(A)+hit(B)=hit(A
or B)+hit(A and B)の関係が成り立つはずですが、infoseekではこの関係が破綻しています。つまり、AND検索に限らず、OR検索の値も信用できません。 2000/7/19 検索エンジンの返すhit数の精度についての検証 Altavistaも、ヒット件数を隠すようです。About 515,508 という値が何度も繰り返し登場しました。 2000/7/20 |
なお、infonavigatorのデフォルトも、「家系図」で検索しても「家系」で検索しても同じ結果になりました。
1文字の単語は扱えないという弱点があっても、総合1位になったRingringは卒業に伴って、消え去っています。（DOS/Vマガジンの情報によれば、TBSに 就職したそうです。）証券会社はYahoo株を買う代わりに、Ringringに投資するみたいなインテリジェントな行動はできないのでしょうか？
| ringringは、土日は止まっていたりしますが、現在も稼働中でした。さらに、1文字キーワードも検索可能になっていました。 2000/7/19 |
| 誤字を修正しました。 2006/12/11 |
goo lycos infonaviには、ロシア語のページが出てきてしまう問題がありますが、別の問題なので、ここではそれを割り引かずに評価しています。(2000/3/23)
AltaVistaがRagingという新サービスを始めたということだったので、Ragingだけ再評価してみました。結果は良いものでした。他のも現時点で調べなおしてからでないと公正さにかけますが、(2000/5/10)
AND検索 １３問
横浜 大阪 名古屋 京都 神戸 福岡 札幌 |
家系 系図 |
日本 アメリカ 中国 フランス ドイツ タイ |
ビール ワイン コーヒー ラーメン ご飯 カレー |
計算幾何学 独立成分解析 |
巡回セールスマン問題 特許 |
Excel FTEST バグ |
i-Mode マイクロソフト NTT 料金 アメリカ |
ニセ首相官邸 産業ロック製作所 |
AND検索小計 |
100%正規化 | |||||
Raging |
98% |
100% |
73% |
100% |
100% |
54% |
100% |
7% |
70% |
56% |
20% |
14% |
25% |
63% |
100% |
(Ringring) |
0% |
0% |
100% |
0% |
0% |
100% |
0% |
65% |
100% |
100% |
100% |
0% |
100% |
51% |
82% |
goo ,yahoo |
100% |
19% |
14% |
34% |
29% |
51% |
26% |
22% |
39% |
53% |
0% |
100% |
0% |
37% |
60% |
lycos |
56% |
21% |
11% |
0% |
60% |
19% |
17% |
26% |
9% |
50% |
0% |
23% |
50% |
26% |
42% |
Altavista |
87% |
39% |
47% |
65% |
38% |
3% |
37% |
7% |
28% |
3% |
0% |
0% |
0% |
27% |
43% |
InfoNavigator |
49% |
9% |
9% |
21% |
21% |
42% |
8% |
26% |
9% |
56% |
0% |
43% |
0% |
22% |
36% |
OCNnavi |
27% |
4% |
7% |
9% |
8% |
12% |
5% |
100% |
15% |
25% |
0% |
60% |
50% |
25% |
40% |
Excite |
36% |
8% |
14% |
6% |
16% |
30% |
12% |
26% |
9% |
33% |
20% |
80% |
25% |
24% |
39% |
ODIN |
47% |
2% |
17% |
21% |
3% |
14% |
4% |
13% |
7% |
56% |
20% |
97% |
75% |
29% |
46% |
infoseek , MSN |
0% |
0% |
13% |
0% |
0% |
0% |
0% |
7% |
9% |
0% |
0% |
0% |
0% |
2% |
4% |
NETPLAZA |
13% |
9% |
7% |
8% |
5% |
4% |
7% |
11% |
7% |
22% |
40% |
34% |
0% |
13% |
20% |
Verno |
20% |
0% |
6% |
11% |
0% |
3% |
0% |
0% |
7% |
25% |
0% |
0% |
0% |
5% |
9% |
Fresheye |
6% |
1% |
0% |
2% |
2% |
2% |
0% |
7% |
0% |
8% |
0% |
6% |
0% |
3% |
4% |
単語検索 １１問
1999 |
黄色 |
宇多田ヒカル |
画像理解 |
ソフトピアジャパン |
計算幾何学 |
ベクトル量子化 |
減色ソフト |
灘のけんか祭り |
松岡肇 |
均等色空間 |
単語検索小計 |
単語100% |
単語とandの平均 |
100% |
|
(Ringring) |
0% |
100% |
100% |
4% |
100% |
36% |
72% |
100% |
100% |
56% |
100% |
70% |
100% |
92% |
100% |
Raging |
100% |
79% |
84% |
5% |
84% |
39% |
66% |
39% |
27% |
19% |
47% |
54% |
77% |
88% |
97% |
goo ,yahoo |
92% |
33% |
47% |
8% |
91% |
52% |
100% |
51% |
28% |
38% |
86% |
57% |
82% |
65% |
71% |
lycos |
57% |
35% |
47% |
11% |
79% |
37% |
74% |
76% |
39% |
70% |
92% |
56% |
81% |
60% |
66% |
Altavista |
0% |
43% |
34% |
3% |
72% |
15% |
5% |
27% |
17% |
20% |
36% |
25% |
35% |
40% |
44% |
InfoNavigator |
0% |
47% |
0% |
5% |
59% |
28% |
60% |
51% |
33% |
60% |
80% |
38% |
55% |
43% |
47% |
OCNnavi |
13% |
7% |
10% |
100% |
33% |
100% |
48% |
9% |
20% |
100% |
28% |
43% |
61% |
47% |
51% |
Excite |
16% |
24% |
29% |
4% |
36% |
26% |
42% |
57% |
25% |
50% |
26% |
31% |
44% |
37% |
40% |
ODIN |
13% |
16% |
14% |
3% |
46% |
26% |
44% |
20% |
43% |
11% |
43% |
25% |
36% |
36% |
39% |
infoseek , MSN |
1% |
14% |
57% |
6% |
2% |
37% |
72% |
75% |
39% |
30% |
96% |
39% |
56% |
30% |
33% |
NETPLAZA |
6% |
5% |
6% |
0% |
4% |
3% |
5% |
16% |
18% |
18% |
4% |
8% |
11% |
14% |
15% |
Verno |
7% |
6% |
5% |
2% |
13% |
14% |
22% |
5% |
11% |
2% |
21% |
10% |
14% |
11% |
13% |
Fresheye |
5% |
3% |
9% |
0% |
5% |
2% |
3% |
7% |
10% |
9% |
5% |
5% |
8% |
6% |
6% |
無意味語検索
夢の中に出てきた無意味語「パスカス」を検索してみたのですが、gooの１件は意味がありました。OCNnaviの一致件数の多さは問題ですが、パスカスが0件だと、自動的にパスとカス間にスペースを入れてAND検索になってしまっている様です。つまり専門用語に強いと思ったのは勘違いだった様です。
「ネビッチ」は、ノイマンがつまらなさの単位として使っていたという言葉なのですが、ストイコビッチにちなんだサッカーファンのあだ名としての「〜ネビッチ」が多くヒットしたみたいです。(2000/5/12)
パスカス |
ネビッチ |
|||
goo ,yahoo |
1 |
空軍特殊部隊（パスカス） |
0 |
|
lycos |
0 |
0 |
||
raging |
32 |
19 |
イーゴリ・スラブネビッチ 、ネビッチョ、アカネビッチ、ナカソネビッチ、オグオネビッチなど |
|
Altavista |
0 |
0 |
||
InfoNavigator |
1 |
パスカルのミスタイプ |
0 |
|
OCNnavi |
1923 |
2 |
ヤスミンコ・ネビッチさん |
|
Excite |
1 |
0 |
||
ODIN |
5 |
2 |
ネビッチョ |
|
infoseek , MSN |
0 |
0 |
||
NETPLAZA |
4 |
オリンパスカスタマーサポート、ピリパスカス、コーパスカスタマーサービス、バースト回路バイパスカスタム |
2 |
シュー・ネビッチェン、イーゴリ・スラブネビッチ |
Verno |
6 |
1 |
シェネビッチェン |
|
Fresheye |
1 |
ラス・チアパスカス |
0 |
|
infoseekに新機能？
インフォシーク 黄色ブドウ球菌 を検索すると、連想ワードとあわせて検索というのが最後に出てきました。これって前からありましたっけ？せっかくなので検索してみました。
メチシリン 耐性 黄色 ブドウ 球菌
| 検索エンジン | ヒット数 2000/7/19 |
再検索用 |
| Ringring | 870 | メチシリン 耐性 黄色 ブドウ 球菌 |
| Altavista | 794 | AltaVista - Web Results |
| Lycos | 707 | LYCOS Japan - 「メチシリン 耐性 黄色 ブドウ 球菌」の検索結果 |
| goo | 485 | goo[グー] |
| Excite | 389 | Excite エキサイト サーチ結果 メチシリン AND 耐性 AND 黄色 AND ブドウ AND 球菌 |
| infoseek | 266 | インフォシーク メチシリン 耐性 黄色 ブドウ 球菌 |
| もぎたてgoo | 252 | もぎたてgoo[グー] |
| OCN navi | 121 | OCN navi -NTT DIRECTORY- |
| netplaza | 86 | 「NETPLAZA」データ検索結果 |
| fresheye | 37 | フレッシュアイ検索結果 |
| Infonavi | 15 | InfoNavigator results |
 | 検索エンジンの評価方法について |
| 数盲政治 現在の日本の法律では商用検索エンジンは著作権違反だそうです。2006/12/11追記 |
作成 不明 (2000/7?) - 更新 2006/12/11
| ||
|
関連ディレクトリ
関連サイト
| |
| |
| |
| |
|
| |
| |
| |
| |
|
|  |
外部リンク
| 毎日新聞問題の情報集積wiki - この問題をとりあげたメディア（時系列順） 東京のキー局はそろって沈黙 |
