При каких условиях пост не может быть просканирован поисковыми системами?

При каких условиях пост перестает быть доступным для индексации поисковыми системами?

В жизни темы при каких условиях она становится доступной для индексации поисковыми роботами?

Некоторые возможности (и, вероятно, другие, не упомянутые здесь), которые меня интересуют:

  • когда оригинальная тема черновиком отправляется и попадает в фильтр «Следим за словами» (заблокировано или требуется одобрение)
  • когда тема становится «Недоступной для списка», удаляется ли она из статуса «доступной для индексации»
  • когда тема удаляется, удаляется ли она из статуса «доступной для индексации»
  • когда пост помечается как нарушающий правила, удаляется ли он из статуса «доступного для индексации»

Кажется, что вопрос можно ответить, определив условия, при которых пост НЕ доступен для индексации.

Да, всё вышеперечисленное верно. Ещё одним фактором, который может препятствовать сканированию темы, является размещение темы в категории, для которой отключён доступ для анонимных пользователей. Все темы на сайте Discourse можно сделать недоступными для сканирования, включив настройку сайта «Требуется вход».Вы также можете запретить сканирование вашего сайта, отключив настройку сайта «Разрешить индексацию в robots.txt». Эта настройка включена по умолчанию.