Quindi, sto usando Discourse come forum per un sito web tramite un sottodominio e ho notato che Bing sta indicizzando ogni singolo post e il feed RSS di ogni categoria nella sezione sitemap del sito.
Si tratta di un comportamento previsto?
Dovrei disabilitare il feed RSS del forum per evitare che ciò accada?
Esiste un modo per disabilitare il feed in Discourse?
Esiste un modo per confermare che il tag noindex appaia nel feed? Chiedo perché non riesco nemmeno a trovare il tag noindex nel codice sorgente dell’RSS. Ad esempio, ho aperto anche questo thread del forum con l’estensione .rss e nel codice sorgente non trovo neppure il noindex.
Finora, vedo i feed solo negli strumenti per i webmaster, nella sezione sitemap sotto il raggruppamento feed.
Certamente. Questo presuppone che tu stia utilizzando Google Chrome, ma puoi seguire un processo simile in altri browser.
Apri il pannello Strumenti per sviluppatori F12
Passa alla scheda Rete.
Carica un feed RSS, ad esempio questo argomento - https://meta.discourse.org/t/bing-is-picking-all-the-rss-feed-for-each-post-can-i-disable-the-feed-in-discourse/168025.rss
Seleziona la voce del feed RSS dall’elenco.
Guarda le intestazioni di risposta nella scheda Intestazioni; dovresti vedere x-robots-tag: noindex
Ciao a tutti! Scusate per il problema. Invierò questo thread agli altri membri del team di Bing. Bing non dovrebbe indicizzare il feed RSS con il meta tag noindex, quindi si tratta probabilmente di un bug o di un problema di crawling. Grazie per la segnalazione!
Ci aspettiamo che la correzione venga applicata entro poche ore. Tornerò su questo thread per confermarlo con un nuovo post. Se dovessimo riscontrare problemi, discuterò la questione in un messaggio privato con l’OP. Ancora, grazie a tutti.
@Frédéric mi ha parlato di questo posto e di cosa sta succedendo. Parlo per suo conto mentre si sta occupando di qualcos’altro che, purtroppo, ha richiesto la sua attenzione.
Al momento, sembra che abbiamo compreso il problema. Come ha detto Frédéric, ho inviato un messaggio diretto a @mhwebee e mi occuperò della questione privatamente da qui. Se poteste chiudere la discussione, sarebbe fantastico!
Cordiali saluti da me e dagli sviluppatori di Bing,