Así que, estoy usando Discourse como foro para un sitio web mediante un subdominio, y noto que Bing está indexando cada publicación y categoría RSS en la sección del mapa del sitio del sitio.
¿Es este un comportamiento esperado?
¿Debería desactivar el feed RSS del foro para evitar que esto ocurra?
¿Existe alguna forma de desactivar el feed en Discourse?
¿Hay alguna manera de confirmar que noindex aparece en el feed? Lo pregunto porque ni siquiera puedo encontrar la etiqueta noindex en el código fuente del RSS. Por ejemplo, también abrí este hilo del foro con el archivo .rss y, en el código fuente, tampoco encuentro noindex.
Hasta ahora, solo veo los feeds en las herramientas para webmasters, en la sección de mapa del sitio bajo el grupo de feeds.
Claro. Esto asume que estás usando Google Chrome, pero puedes seguir un proceso similar en otros navegadores.
Abre el panel de Herramientas para desarrolladores F12
Cambia a la pestaña Red.
Carga un feed RSS, por ejemplo este tema - https://meta.discourse.org/t/bing-is-picking-all-the-rss-feed-for-each-post-can-i-disable-the-feed-in-discourse/168025.rss
Selecciona la entrada del feed RSS de la lista.
Mira los encabezados de respuesta en la pestaña Encabezados; deberías ver x-robots-tag: noindex
¡Hola a todos! Perdón por todos los inconvenientes. Voy a reenviar este hilo a los demás miembros del equipo de Bing. Bing no debería indexar el RSS con la etiqueta meta noindex, así que probablemente se trate de un error o de un problema de rastreo. ¡Gracias por el informe!
Esperamos que esto se solucione en cuestión de pocas horas. Luego volveré a este hilo y publicaré una confirmación al respecto. Si encontramos algunos problemas, llevaré el asunto a un mensaje privado con el autor original (OP). De nuevo, gracias a todos.
@Frédéric me ha hablado de este lugar y de lo que está ocurriendo. Hablo en su nombre mientras él se ocupa de otra cosa que, lamentablemente, ha requerido su atención.
Por el momento, parece que tenemos el asunto bajo control. Como dijo Frédéric, he enviado un mensaje directo a @mhwebee y me encargaré de ello en privado. Si pudieras cerrar el hilo, ¡sería genial!
Saludos cordiales de mi parte y de los desarrolladores de Bing,