Google,Yahoo,MSがWebインデックス作成機能を共通化
採用されるプロトコルは、去年から設けられているGoogle Sitemapsのものを利用するとの事。これを使うことで効率的なクローリングを促す事が可能になります。
また、自分のサイトがクロールされたかどうかの確認もできるようになります。検索エンジンの御三家が共通化されれば、Askや他の検索エンジンも追随せざるを得ない事でしょう。
Google Sitemapsについては以下を参照のこと。なぜか筆者のFirefox 2では文字化けするのですが、IEでは問題なく見られます。