Здравствуйте! Мой веб-сайт полностью представляет собой форум, созданный на платформе Discourse. Я поискал домен своего сайта, но ни Google, ни Bing не отображают его. Искусственный интеллект предположил, что, возможно, настройки роботов в параметрах безопасности Discourse блокируют индексацию сайтом Google. Верно ли это? И как я могу разрешить Google доступ к моему сайту?
Спасибо,
Фрэнк
Привет! Вы недавно запустили форум? Достаточно ли там качественного контента? Если мне не изменяет память, это ключевой фактор для того, чтобы поисковые системы индексировали ваши страницы.
Да, я загрузил сайт всего на несколько недель, но когда я создавал другие сайты на WordPress, Google Search отображал домен почти мгновенно. Действительно ли мне не нужно менять какие-либо настройки, чтобы Google Search нашёл мой сайт?
Вы изменили разрешённые агенты-краулеры или запрещённые агенты-краулеры?
Добавили ли вы свой сайт в Google Search Console?
Также рекомендуем ознакомиться с:
Там много полезной информации.
@Frankz, удалось ли вам разобраться с этим? Теперь ваш сайт отображается в результатах поиска в интернете? Мне кажется, что предложения Нейта верны. Поисковым системам требуется время, чтобы заметить новый сайт. Обязательно проверьте свои настройки!
Если этот сайт размещён у нас, обратитесь по адресу team@discourse.org, и наша служба поддержки поможет вам убедиться, что настройки указаны правильно. Настройки по умолчанию должны быть в порядке.
Возможно, также стоит дважды проверить, что опция «Разрешить индексирование в robots.txt» по-прежнему включена.
Мой сайт размещен на платформе Discourse Forum. Где находится настройка «Разрешить индексацию в robots.txt»?
Привет, Frankz! На вашем сайте перейдите в раздел «Администрирование», затем в боковом меню выберите «Все настройки сайта» и выполните поиск по запросу «разрешить индексацию». Вы увидите эту настройку. Установлена ли она правильно?
Если после этого у вас всё ещё возникнут проблемы, напишите на адрес team@discourse.org. Наша команда поддержки с радостью вам поможет.
Я попробовал добавить www. перед именем домена, и теперь мой сайт отображается в результатах поиска Google. Спасибо, Фрэнк.
Отлично! Доменное имя вашего форума тоже содержит несколько общих слов, поэтому меня не удивляет, что Google не распознал его, когда вы ввели его отдельно. Вы также можете добавить https:// перед ним, чтобы убедиться, что Google распознает его как URL веб-сайта. Я также поискал несколько заголовков тем и увидел, что ваш форум появляется вверху результатов поиска, так что, думаю, у вас всё в порядке здесь. 
Используйте поиск: site:hostname, например site:meta.discourse.org.
Это покажет, что было проиндексировано для вашего сайта.