как можно установить для всех тегов значение noindex, follow? В настоящее время мы исключаем теги через robots.txt, но хотим изменить этот подход. Нам нужно, чтобы Google мог просматривать теги, но не индексировал их. То есть noindex, но follow.
в файле robots.txt нельзя использовать «noindex,follow». Можно использовать только «noindex,nofollow». Но мне нужен вариант «noindex,follow», поэтому его нужно удалить из robots.txt и добавить в тег как мета-информацию .