Hola. He visto la discusión en:
pero no encontré una respuesta clara a esta pregunta. ¿Cómo puedo habilitar un archivo robots.txt para un sitio de Discourse para indicar que no debe ser indexado por ningún rastreador? Esto se refiere a un sitio privado y no hay razón para que tenga presencia en ningún motor de búsqueda. ¡Gracias!
Consulta la penúltima respuesta en ese tema: Needing to edit robots.txt file - where is it? - #42 by Osama.
¡Ah, me perdí ese de abajo. Perfecto. Funcionó a la perfección. ¡Gracias!
Además, asegúrate de tener activada la configuración de «inicio de sesión requerido» volviendo a ejecutar el asistente en discourse.yoursite.com/wizard. Esto también impedirá el acceso a los motores de búsqueda.
El sitio siempre ha requerido inicio de sesión y no permite el registro automático de usuarios. Sin embargo, aún aparecía en los motores de búsqueda, aunque sin contenido indexado, ya que no podía iniciar sesión. Mi esperanza es que, al bloquear explícitamente mediante robots.txt, cualquier mención desaparezca. Gracias.