Hola,
Acabo de recibir este correo de Google:
Elimina las declaraciones “noindex” del archivo robots.txt de
¿Es algo conocido en la comunidad? ¿Necesito tomar alguna medida?
Gracias
Parece que Google acaba de enviar esto, yo también recibí un correo electrónico.
Yo también, publico para estar al tanto de las opiniones, etc.
¿Es el mismo correo? ¿Tengo que ocuparme yo mismo? ¿Cómo lo manejo?
No te preocupes, está codificado en el núcleo; el equipo de Discourse lo actualizará y en unos días estará solucionado. Solo tendremos que actualizar nuestro Discourse.
Pero, para los más impacientes, ahora puedes editar el archivo robots.txt:
Google Search Console me está enviando mensajes sobre nuestro sitio de Discourse:
Elimina las declaraciones ‘noindex’ del archivo robots.txt de https://discourse.hookproductivity.com/
Al propietario de https://discourse.hookproductivity.com/,
Google ha identificado que el archivo robots.txt de tu sitio contiene la regla no compatible ‘noindex’.
Esta regla nunca fue oficialmente compatible con Google y el 1 de septiembre de 2019 dejará de funcionar. Consulta nuestro centro de ayuda para saber cómo bloquear páginas del índice de Google.
Si no has personalizado tu archivo robots.txt, no necesitarás hacer nada… disallow ya está haciendo la mayor parte del trabajo.
Por defecto, Discourse utiliza tanto disallow como noindex en el archivo robots.txt.
En el artículo del blog sobre esta actualización, Google sugiere usar disallow, lo cual ya hacemos. Utilizamos noindex además para ayudar a evitar este problema de enlazamiento que menciona Google (he añadido énfasis a la parte relevante)…
Disallow en robots.txt: Los motores de búsqueda solo pueden indexar páginas de las que tienen conocimiento, por lo que bloquear el rastreo de una página generalmente significa que su contenido no será indexado. Aunque el motor de búsqueda también puede indexar una URL basándose en enlaces de otras páginas, sin ver el contenido en sí, nuestro objetivo es hacer que tales páginas sean menos visibles en el futuro.
Por nuestra parte, evaluaremos realizar una actualización para agregar la etiqueta meta noindex o utilizar el encabezado X-Robots-Tag en nuestras respuestas HTTP para asegurarnos de que Google no indexe el enlace cuando aparezca en otras páginas (actualizaremos este tema con cualquier cambio).
Si has agregado reglas personalizadas de noindex al archivo robots.txt a través de tu página de administración /admin/customize/robots, deberías cambiarlas a disallow
La inclusión de noindex en robots.txt fue un cambio de “SEO” poco aconsejable al que desafortunadamente nos convencieron de hacer hace aproximadamente un año. Ese cambio ha sido revertido y se ha aplicado también a la versión estable.