AI目的で検索エンジンがウェブをクロールするのを制御するための新しい手段の策定にGoogleが着手

急速に発展する AI と研究利用に対して、検索エンジンによるコンテンツのクロールをパブリッシャーが制御するための新しい方法を模索するための公開ディスカッションを Google は開始した。

現在のサイトマップと以前のサイトマップをGoogleは比較し、新しいURLや削除されたURLを発見するのか?

何が新しいのかや何がサイトから削除されたかを確認するために、Google は、現在のバージョンのサイトマップと以前のバージョンのサイトマップとで何かしら比較するのだろうか?