Google notifica di rimuovere le dichiarazioni "noindex" da robots.txt

Ciao,

Ho appena ricevuto questa email da Google:

Rimuovi le istruzioni “noindex” dal file robots.txt di

È qualcosa di noto alla comunità? Devo intraprendere qualche azione?

Grazie

Sembra che Google l’abbia appena inviato, ho ricevuto anche io un’email.

Anche io, pubblico per tenere d’occhio le opinioni e così via

La stessa email, devo occuparmene da solo? Come si fa?

Non preoccuparti, è codificato nel core: il team di Discourse lo aggiornerà e in pochi giorni sarà risolto. Non dovremo fare altro che aggiornare il nostro Discourse.

Ma, per i più impazienti, ora puoi modificare il file robots.txt:

Google Search Console mi sta inviando messaggi riguardo al nostro sito Discourse:

Rimuovi le istruzioni ‘noindex’ dal file robots.txt di https://discourse.hookproductivity.com/

Al proprietario di https://discourse.hookproductivity.com/,

Google ha rilevato che il file robots.txt del tuo sito contiene la regola non supportata ‘noindex’.

Questa regola non è mai stata ufficialmente supportata da Google e dal 1° settembre 2019 smetterà di funzionare. Consulta il nostro centro assistenza per scoprire come bloccare le pagine dall’indice di Google.

Se non hai personalizzato il file robots.txt, non dovrai fare nulladisallow sta già svolgendo gran parte del lavoro.

Per impostazione predefinita, Discourse utilizza sia disallow che noindex nel file robots.txt.

Nel post del blog su questo aggiornamento, Google suggerisce di utilizzare disallow, cosa che facciamo già. Utilizziamo anche noindex per contribuire a evitare il problema di linking menzionato da Google (ho messo in evidenza la parte rilevante)…

Disallow in robots.txt: I motori di ricerca possono indicizzare solo le pagine di cui sono a conoscenza, quindi bloccare la scansione della pagina significa solitamente che il suo contenuto non verrà indicizzato. Sebbene il motore di ricerca possa anche indicizzare un URL in base a collegamenti da altre pagine, senza vedere il contenuto stesso, miriamo a rendere tali pagine meno visibili in futuro.

Da parte nostra, valuteremo un aggiornamento per aggiungere il tag meta noindex o utilizzare l’intestazione X-Robots-Tag nelle nostre risposte HTTP per garantire che Google non indichi il collegamento quando appare su altre pagine (aggiorneremo questo argomento con eventuali modifiche).

Se hai aggiunto regole personalizzate noindex al file robots.txt tramite la pagina di amministrazione /admin/customize/robots, dovresti modificarle in disallow

La presenza di noindex in robots.txt è stata una modifica sconsigliata in ambito “SEO” che abbiamo purtroppo accettato di apportare circa un anno fa. Tale modifica è stata ora annullata e il ripristino è stato applicato anche alla versione stabile.