Appena passato da privato a pubblico, bloccato da robots.txt

Ho appena reso i nostri forum scopribili da Google e ho utilizzato la Search Console per indicizzare il nostro sito. (Non sono sicuro se ci siano altre cose che dovrei fare ¯\_(ツ)_/¯ (qualche suggerimento?)

Ecco il feedback ricevuto da Google Search Console:

Hai controllato il tuo robots.txt?

Non sono sicuro di cosa guardare nel mio file robots.txt o dove trovarlo.

Ho assicurato che questa casella fosse spuntata nelle mie impostazioni di amministrazione…

Non so se questo faccia una differenza nel caso della mia domanda, ma un’altra cosa da notare è che sto utilizzando l’SSO e ho WordPress come provider. Farebbe una differenza, qui?

Il mio sito è pickleballist.com
Il mio forum è forums.pickleballist.com

Il file robots.txt si trova nella directory principale di ogni sito, quindi:

https://pickleballist.com/robots.txt
https://forums.pickleballist.com/robots.txt

Nessuno di questi file blocca Google; puoi verificare tu stesso utilizzando scanner di robots.txt di terze parti, ad esempio questo strumento di Ryte.

Ciò conferma che il file robots.txt non blocca Googlebot:

Google dispone inoltre di un tester all’interno della Search Console.

User-agent: *
Disallow:

Elimina il link da bloccare nel file di disabilitazione robots.txt

Poiché il tuo forum è stato impostato come ‘login_required’ e/o ha bloccato l’indicizzazione per così tanto tempo, ci vorrà del tempo prima che il crawler ricontrolli il tuo file robots.txt e veda che è stato sbloccato. Probabilmente c’è un pulsante per richiedere una nuova scansione da qualche parte, oppure puoi semplicemente aspettare.

Sì, hai ragione, è “login_required” da molti mesi. Speriamo di essere indicizzati presto!