doudoudoudou https://blog.hatena.ne.jp/doudoudoudou/ SEO最前線 https://seo-frontline.com/ SEO 海外SEO AI検索 概要 Googleは、HTTP Archiveから収集した実際のrobots.txtデータに基づき、ドキュメント内の未サポートのrobots.txtルールリストを拡張する可能性があります。このプロジェクトは、Search Off the Recordの最新エピソードで、Gary Illyes氏とMartin Splitt氏によって説明されました。 この取り組みは、コミュニティメンバーが2つの新しいタグを未サポートリストに追加するプルリクエストを提出したことから始まりました。Googleは恣意的な追加を避け、データ収集に基づいて最も使用されている未サポートのルール上位10～15個を特定することを… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fseo-frontline.com%2Fentry%2F2026%2F04%2F25%2F110705" title="Googleが未サポートのrobots.txtルールリストを拡大へ - SEO最前線" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn.searchenginejournal.com/wp-content/uploads/2026/04/ef0c2162-b342-49e6-ba16-eabfa3c37b81-885.jpeg Hatena Blog https://hatena.blog 2026-04-25 11:07:05 rich https://seo-frontline.com/entry/2026/04/25/110705 1.0 100%