Domanda sul web crawler

Buon pomeriggio,

esiste un modo specifico per cui una richiesta HTTP possa identificarsi come richiesta di un web crawler al server Discourse? Il motivo è che il sito web utilizza elementi come lo scroll infinito, quindi mi chiedevo se la pagina apparirebbe diversamente quando viene effettuata una richiesta da un crawler. Grazie in anticipo!

Puoi includere la stringa bot nell’intestazione User-Agent per ottenere la nostra vista speciale per i crawler.