良い検索エンジンは「偏り」の宝庫

例えば、われわれが本を探しに図書館に行った時、参考司書(reference librarian)のアドバイスは公平だと考えるだろう。彼らは情報の探し方はもちろん、その質や信頼性を評価する方法に精通しているのだ。

同様に、われわれは検索エンジンの検索結果も公平で信頼できると思う傾向がある。だが、検索エンジンは単なるコンピュータープログラムで、プログラム作成者の偏見が入るのはもちろん、クエリー自体ある情報を優先的に表示するよう設定されている。

City College of New York のコンピューターサイエンティスト Abbe Mowshowitz と Akira Kawaguchi 氏は、検索エンジンの偏りについて測定した論文「Assessing Bias in Search Engines」を発表した。同論文によれば、検索エンジンには実際に偏りが見られるものの、クエリーの検索用語が多ければ多いほど偏りが減少する傾向にあるという。

だが、図書館のカタログ司書が、オンライン・コンピュータ図書館センター（OCLC）に、トピック別に本を分類する場合を考えてほしい。偏見のない検索支援ツールがないのと同様、偏りが少ないからといって良い検索エンジンとは言えないのである。

検索が失敗する典型的なパターンには、a) 間違った構文の入力　b) 存在しない情報の検索　c) 検索語が一般的過ぎる、または複数の意味を持つ、などがある。そもそも b は検索のしようがなく a と c の場合も偏見とはほぼ無関係だ。

検索エンジンは検索ツールであるにもかかわらず、人々は答えを導き出すものと考えている。この認識が改められない場合は、検索エンジンに関する報告書などを読むのがいいだろう。

「Assessing Bias in Search Engines」 は、非常に読み応えのある論文だ。 お気に入りの検索エンジンの結果に偏りがないかどうかを疑問に思った時に、面白い論点を提示してくれるだろう。

• 【ミミズクの目】ジャズ界初の動画コンテストが YouTube で開催（Webビジネス 11月22日 12:10）
  YouTube でジャズ動画コンテスト「Diners Club Presents - Jazz Session on YouTube」が開催。
• 【今週の Web ミミズク】Chrome OS は SSD に乗って（Webテクノロジー 11月21日 12:00）
  今週のテーマは“半導体ドライブ”、いわゆる“SSD”だ。“シリコンディスク”とか半導体ディスク、擬似ディスクと呼ばれたりするようだが、最近 SSD 関連のニュースをよく見かけるようになった。
• Adobe が『Acrobat.com』を一新、モバイル用アプリも登場（Webビジネス 11月21日 11:10）
  Adobe Systems はオンライン アプリケーション サービス『Acrobat.com』を一新する。35の新機能を追加するほか、レイアウトデザインが改良され、初のモバイル用アプリケーションも登場する。
• Infoseek 検索キーワードランキング (2009/11/10〜11/16)（Webマーケティング 11月20日 19:10）
  今週の時事は、予算概算要求の無駄を洗い出す“事業仕分け”が開始した「行政刷新会議」が今週の1位。
• レコチョク週間ランキング（2009年11月11日〜11月17日）（Webマーケティング 11月20日 18:40）
  レコチョク週間ランキング（2009年11月11日〜11月17日）。レコチョク集計による「着うた」、「着うたフル」、「着ムービー」を掲載します。