Acabei de mudar de privado para público, bloqueado pelo robots.txt

Suporte
1

Acabei de abrir nossos fóruns para serem descobertos pelo Google e usei o Search Console para indexar nosso site. (Não tenho certeza se há outras coisas que eu deveria estar fazendo ¯\_(ツ)_/¯ (alguma sugestão?)

Aqui está o feedback que recebi do Google Search Console:

image
image940×854 54.8 KB

2

Você já verificou o seu robots.txt?

3

Não tenho certeza do que procurar no meu arquivo robots.txt ou onde encontrá-lo.

Verifiquei se esta caixa estava marcada nas minhas configurações de administração…

image
image758×192 22.6 KB

4

Não sei se isso faz diferença no caso da minha pergunta, mas outra coisa a observar é que estou usando SSO e o WordPress como provedor. Isso faria alguma diferença, aqui?

Meu site é pickleballist.com
Meu fórum é forums.pickleballist.com

5

O arquivo robots.txt de cada site está na raiz, ou seja:

https://pickleballist.com/robots.txt
https://forums.pickleballist.com/robots.txt

Nada nesses arquivos está bloqueando o Google. Você pode verificar isso por conta própria usando verificadores de robots.txt de terceiros, como esta ferramenta da Ryte.

Isso confirma que o robots.txt não está bloqueando o Googlebot:

RYTE Robots Test
RYTE Robots Test2910×1546 290 KB

O Google também possui um testador no Search Console.

6

User-agent: *
Disallow:

Delete the link to block in the disable file robots.txt

7

Como seu fórum esteve com login obrigatório e/ou bloqueando a indexação por tanto tempo, levará um tempo até que o crawler verifique novamente seu arquivo robots.txt e perceba que o bloqueio foi removido. Provavelmente há um botão para solicitar uma nova varredura em algum lugar, ou você pode apenas aguardar.

8

Sim, você está certo, que tem sido “login_required” por muitos meses. Esperamos ser indexados em breve!