Disabilita o bypassa il rilevamento delle funzionalità per Googlebot (servendo l'app JS ai crawler)

Sono contento che tu lo abbia chiesto, sì, penso che sia il motivo della mia “leggera penalizzazione” da parte di Google

Permettimi di elaborare.

Abbiamo avuto un aggiornamento del sito molto sciatto intorno a settembre/ottobre 2019, il sito principale è crollato proprio allora.

Non ci siamo mai ripresi. Il sito non è mai stato migliore per quanto riguarda la SEO. Certo, non è perfetto, ma siamo anni luce avanti rispetto ad alcuni concorrenti. Siti che utilizzano le nostre immagini e testi vecchi di molti anni ci superano per pagine. Siamo sulla terza e loro forse sono in cima alla seconda pagina.

Ho consultato innumerevoli blog, video, post sulla SEO e ho persino avuto qualche scambio con John Mueller (su Reddit).

Il massimo che ho ottenuto da lui è stato che potrebbero esserci “problemi di qualità”. Abbiamo migliorato notevolmente il sito principale da gennaio di quest’anno. Nemmeno un sussulto nel traffico organico.

Discourse: L’avevo installato nel 2013 e me ne ero dimenticato. Controllavo a malapena il suo traffico.

Se guardi le analisi del sito principale, vedrai un brusco calo verso la fine del grafico. Questo è il momento in cui ho iniziato a lavorare su Discourse.

Quando ho provato prerender.io su discourse, il posizionamento del sito principale era tutto un caos. A volte saltava 10-15 posizioni durante la notte, poi tornava indietro. (Ho smesso di usare prerender poiché non riuscivano a renderizzare il menu principale, il login, ecc.)

Da quello che ho letto online, questo è un segno che Google non sa dove posizionarti. Dicono che basta un “po’ di più” e sei dalla parte giusta dell’algoritmo.

Niente di ciò che abbiamo fatto negli ultimi 3 anni ha innescato queste fluttuazioni nei SERP.

(Giocare con lo strumento di disconoscimento di Google, pulire il codice, URL puliti, struttura del sito, collegamenti interni, social, contenuti, ecc.)

Potresti sostenere, perché Google non ti ha penalizzato nel 2018? (avevi discourse sul sottodominio anche allora)

Beh, penso che sia stata una moltitudine di fattori unici del sito, la sua storia, il profilo dei link. che lo hanno fatto crollare alla fine del 2019. Sembra che Google abbia riorganizzato il posizionamento del sito e forse abbia dato più peso agli URL di discourse rispetto a quanto facesse in precedenza.

E il fatto è… amo Discourse. Soprattutto ora che sono stato di più su meta, tutti questi fantastici plugin e funzionalità di cui non avevo idea esistessero. Wiki, pagamenti in abbonamento, indice, e ora la chat!!

Quindi allontanarsi da discourse non è davvero un’opzione, troppo investito a questo punto.

Ho considerato questo e sono disposto a correre il rischio. So che non sarà perfetto, ma da quello che leggo e guardo, Google è diventato davvero bravo a capire il JS di recente.

Hanno persino deprecato lo schema di crawling ajax

I tempi sono cambiati. Oggi, finché non blocchi Googlebot dall’indicizzare i tuoi file JavaScript o CSS, siamo generalmente in grado di renderizzare e comprendere le tue pagine web come i browser moderni.

Nota a margine: Discourse ha un’impostazione per il crawling ajax, immagino che alla fine dovrà andare


Quindi il piano è servire l’app a Google, fare del mio meglio per risolvere eventuali problemi SEO che potrebbero sorgere e godermi l’impennata di traffico.

Potrò quindi riportare i risultati su meta e sostenere che Discourse dovrebbe considerare l’ottimizzazione del JS per Google.

Ad esempio, forse qualcosa come questo (dal blog di Google) aiuterebbe con i problemi di paginazione e scorrimento.

E mantenere la versione non-crawler per i vecchi browser.