シンジケーションの重複防止のためのnoindex推奨はGoogleニュースではずっと以前から

シンジケーションで発生しうる重複コンテンツを防ぐ手段として、rel=canonical ではなく noindex がウェブ検索で推奨になった。しかし、Google ニュースではずっと以前からそうだったとのこと。

AI目的で検索エンジンがウェブをクロールするのを制御するための新しい手段の策定にGoogleが着手

急速に発展する AI と研究利用に対して、検索エンジンによるコンテンツのクロールをパブリッシャーが制御するための新しい方法を模索するための公開ディスカッションを Google は開始した。