Мой форум закрытый, и я не хочу, чтобы он индексировался. Также я хочу удалить ранее созданные индексы.
Поиск был заблокирован с помощью настроек robots.txt ниже:
User-agent: *
Disallow: /
Но как удалить существующий индекс?
Останавливается ли сканирование и удаляется ли он автоматически со временем? Или мне нужно добавить этот HTML-тег: <meta name="robots" content="noindex">?