方法

　おそらく殆どのサイトでは検索エンジンのクローラ用に robots.txt が用意されていると思いますが，これにたった 1 行追記するだけです。

　ちなみにこのサイトのrobots.txtは こんな感じになっています。

解説

　今回のニュースを受けて久々に sitemaps.org を訪ねてみると，日本語ページが用意されていたりとリニューアルしていました。 ただ，一部日本語訳されていない部分が残っていたりしてまだ不完全なようです。 その中でプロトコルの説明に以下の項目が追加されていて， これが今回アナウンスされた Sitemaps Autodiscovery についての説明になります。

robots.txt ファイルにサイトマップの場所を明示する

robots.txt ファイルを使ってサイトマップの場所を明示することができます。 そのためには，単純に次の行を追加するだけです：

Sitemap: <サイトマップの場所>

<サイトマップの場所> は， http://www.example.com/sitemap.xml のようなサイトマップへの完全な URL でなければなりません。
この指定はユーザエージェントの指定とは無関係で， ファイルの中のどこに書いても問題はありません。 もしサイトマップのインデックスファイルを使用しているのであれば， そのインデックスファイルの場所だけを含めればよく， インデックスファイル中に記載されているそれぞれ個々のサイトマップを羅列する必要はありません。

効果のほどは？

　アクセスログを見ると，今までも Google のクローラロボットは 頻繁にサイトマップを参照してくれていた一方， Yahoo! や MSN のクローラボットは全く知らんぷりでした。 実際，Yahoo! と MSN についてはサイトマップを知らせていなかったので当然と言えば当然です。
　そこで今回，robots.txt でサイトマップの在り処を明示したところ， 早速 Yahoo! のクローラロボットがサイトマップにアクセスしていました。 作業として robots.txt にサイトマップの指定を追記しただけなので， Sitemaps Autodiscovery の仕様に従ってクロールしてくれていることが判ります。 MSN と Ask.(com|jp) からのアクセスは未だ確認できていません。

　これで後は MSN と Ask.* のクローラボットについても無事にサイトマップを取得してくれるようになれば， サイトマップとは別にわざわざ ROR (Resources of a Resource) を用意する手間も省けるわけですね。