Pergunta sobre web crawler

Boa tarde,

Existe alguma maneira específica de um pedido HTTP se identificar como uma solicitação de rastreador web para o servidor Discourse? A razão é que o site usa elementos como rolagem infinita, então fiquei com dúvida se a página teria uma aparência diferente quando uma solicitação de rastreador fosse feita. Obrigado antecipadamente!

Você pode incluir a string bot no cabeçalho User-Agent para obter nossa visualização especial para crawlers.