Preciso encontrar o arquivo robots.txt correto e o sitemap.xml

Recentemente, configurei o Discourse usando a instalação de um clique no DigitalOcean. Tudo funciona bem, mas quando comecei a configurar coisas de SEO como robots.txt e sitemap.xml, não consigo encontrar ou localizar o arquivo exato que estou visualizando através de links no navegador, como https://geekbay.org/robots.txt, que aparece na web, não é exatamente o conteúdo que localizei no servidor, o que é estranho. Por favor, ajude, tenho que terminar o básico de SEO para melhores resultados na web, os resultados de pesquisa do Google são tão desajeitados e não profissionais para o meu site, se alguém puder ajudar, por favor.

Receio que o instalador de um clique do DO não seja uma instalação suportada para obter ajuda aqui no meta. Como não o criamos, há muitas incógnitas para que possamos solucionar consistentemente os possíveis problemas.

Se você pudesse considerar a mudança para uma instalação padrão, talvez ache as coisas mais fáceis e também possa acessar mais suporte da comunidade aqui no meta.

1 curtida

Digital Ocean e o padrão são iguais neste contexto, e isso é mais uma questão de suporte de uso, não de instalação. Você pode editar o robots.txt nas configurações, se quiser. Mas o padrão funciona razoavelmente bem se um bot se comportar bem, e se não… então o robots.txt é totalmente inofensivo. O sitemap será gerado automaticamente e não há necessidade de editá-lo manualmente.

Por curiosidade — como você gostaria de mudar isso para obter um SEO melhor? Isso normalmente não é necessário.

1 curtida

meu problema real é que a primeira página e o primeiro resultado de pesquisa do meu site não estão bons, como título e descrição, tudo em uma única linha
e a descrição do site não está aparecendo e, em seguida, os identificadores sociais não aparecem consecutivamente na primeira página de resultados, esse é o principal problema para mim

abaixo do primeiro resultado, quero mostrar a caixa de pesquisa e 5-6 categorias principais nos resultados da pesquisa