Привет, ребята,
Я решил использовать теги в Discourse. Но я не хочу, чтобы теги индексировались Google…
Так что я спрашиваю, как добавить мета-тег Robots “noindex” на страницы тегов.
<meta name="robots" content="noindex" />
Спасибо!
Привет, ребята,
Я решил использовать теги в Discourse. Но я не хочу, чтобы теги индексировались Google…
Так что я спрашиваю, как добавить мета-тег Robots “noindex” на страницы тегов.
<meta name="robots" content="noindex" />
Спасибо!
У нас та же ситуация с страницами тегов и страницами пользователей
Страницы тегов и пользователей уже включены в список noindex.
Хм. У нас вроде бы нет тегов noindex ни на страницах тегов, ни на страницах пользователей. Я не настраивал форум, поэтому не уверен, не менял ли кто-то это вручную. Где я могу это изменить?
Директива noindex передается как через заголовок ответа, так и в файле robots.txt:
➜ ~ curl https://meta.discourse.org/tag/planned -I -X GET
HTTP/2 200
date: Tue, 09 Feb 2021 14:38:52 GMT
...
x-robots-tag: noindex
...
➜ ~ curl https://meta.discourse.org/u/Falco -I -X GET
HTTP/2 200
date: Tue, 09 Feb 2021 14:39:38 GMT
...
x-robots-tag: noindex
...
https://meta.discourse.org/robots.txt
User-agent: *
...
Disallow: /u
Disallow: /my
Disallow: /tag
..."}