オープンソースでアルゴリズムを公開する検索エンジン

ＺＤNet記事「検索アルゴリズムを公開するオープンソースプロジェクト」
Nutch http://www.nutch.org/
Overtureが資金提供していること以上に、EFFのミッチ・ケイパー氏やO'Reilly のティム・オライリー氏が参加している点が興味深いです。検索アルゴリズムを公開するとスパマーの餌食になる、という指摘は記事中でもされていますが、weblog系のシンジゲーションと相互リンクに基づく信頼できるサイトの絞込みと組み合わせるのも一つの方法では。
これまではGoogleでWEB Service APIが公開されていても、コアの検索技術はクローズだったことが、いまいちGoogle APIを使う用途を狭めていたような気がするので、こういったオープンソースの検索アルゴリズムを、分散コンピューティングのアーキテクチャ上に展開すると、かなり面白い展開が可能なのでは。

同じくZDnetで検索エンジンをパーソナライズする技術を開発しているKaltix社についての記事もありましたが、データマイニングをはじめOne to Oneマーケティング系の話は、どうしてもＤＢ、サーバーが肥大化しがちだと思います。コンビニのPOS情報の解析のように、特定セグメントに限った用途には向くのかもしれませんが、ブログ技術などによって、ますます情報更新がスピードアップしているインターネットに関していうと、やはりオープンなアーキテクチャをベースに機能をアドホックに拡張していく方向性がアリな気がします。