sitemaps.xml에서 색인되지 않은 URL 제거

WordPress에서 게시된 모든 게시물에 x-robots-tag “noindex” 헤더가 추가되었으므로, sitemap.xml에서 해당 URL을 제거하는 것도 중요합니다.

URL에 noindex 태그가 지정되면 크롤러가 크롤링 예산을 절약하기 위해 해당 URL을 덜 자주 크롤링합니다. sitemap.xml에 포함된 URL은 중요하다고 간주되어 크롤링 우선순위가 높아집니다. 따라서 크롤러에게 전달되는 메시지가 모순됩니다.

인터넷은 방대하고 구글은 자원을 절약하기 위해 항상 우선순위를 두려고 합니다. 일부 SEO 전문가들은 이것이 PR 희석으로 이어질 수 있다고도 믿습니다.