Hallo. Wir haben eine chinesische Version unserer Website, aber leider werden die Forenthemen nicht von Baidu indexiert. Ich habe bemerkt, dass dieses Forum problemlos von Baidu indexiert wird. Die Frage richtet sich sowohl an die Administratoren dieses Forums als auch an die Community-Mitglieder, die ein chinesisches Forum gestartet haben: Was haben Sie getan, damit Baidu die Themen indexiert?
Wie alt ist dein Forum? Die Indexierung dauert je nach Suchmaschine eine Weile. Hast du über die Site-Einstellung „blacklisted crawler user agents
Das Forum wurde im April gestartet, also ist das wohl nicht der Grund. Die Einstellungen für die schwarze Liste der Crawler sind dieselben wie auf Ihrem Screenshot. Außerdem gibt es in der robots.txt keine Einschränkungen für den Baidu-Bot.
Was sagt die Baidu-Suchmaschine dazu? Soweit ich weiß, gab es früher einen Bereich (ziyuan.baidu), in dem Sie detaillierte Informationen über den Status Ihrer auf Baidu hinzugefügten Website erhalten konnten.
Discourse erfordert keine zusätzlichen Einstellungen für die Indexierung. Wenn der Scanner nicht auf der schwarzen Liste steht, sollte es keine Probleme geben.
Update zum Thema. Wir haben ein Konto auf ziyuan.baidu.com erstellt. Es scheint nichts falsch zu sein. Der Crawler holt den Seiteninhalt korrekt ab. Außerdem haben wir Logs auf dem Server implementiert. Baidu führt täglich Dutzende von Anfragen an Themen-Seiten durch, die mit einer 200er-Serverantwort enden.
Noch etwas Interessantes: Wir sind nicht allein. Ich habe den Baidu-Index für Ihre Kunden auf der entsprechenden Seite geprüft. Mindestens vier von ihnen haben ähnliche Probleme:
Bitte teilen Sie uns mit, falls Sie Ideen haben.
Vielleicht bevorzugt Baidu in China gehostete Seiten? Baidu ist natürlich eine regionale Suchmaschine; er sucht zwar nach anderen Ressourcen, doch seine Hauptaufgabe ist die hochwertige lokale Suche. Daher ist es schwer zu sagen. Möglicherweise müssen Sie dies etwas genauer untersuchen, wie sich die Region darauf auswirkt. Vielleicht hat Baidu noch weitere spezielle Anforderungen?
Wenn Baidu die Seite erhält und, wie Sie schreiben, alles in Ordnung ist, könnten interne Ranking-Mechanismen ins Spiel kommen, die nicht von der Software abhängen.
Die Übertragungsgeschwindigkeit hängt ebenfalls von vielen Faktoren ab, beispielsweise von der Relevanz der Informationen, der Aktualisierungshäufigkeit, der Geschwindigkeit, mit der Backlinks von anderen Seiten gesetzt werden, sowie deren Häufigkeit usw.
Warum gehen Sie das nicht mit Baidu an? Vielleicht, weil nur Ihre Seiteninhalte (und die erforderliche Registrierungs-Telefonnummer) auf Chinesisch sind. Wenn ja, dann ist das Ergebnis genau das, was ich erwartet hätte.
Das ist nur eine Spekulation, ohne die URL Ihrer Seite, aber wir wissen, dass Baidu unter anderem Folgendes priorisiert:
- Vereinfachtes Chinesisch vor anderen Sprachen
- In China gehostete Seiten vor Hosting außerhalb Chinas
- Chinesische Top-Level-Domains, also .cn-Seiten
Deshalb bringt es nichts, sich Discourse-Kunden-Websites anzusehen, die auf Englisch sind, außerhalb Chinas gehostet werden und keine chinesische Top-Level-Domain haben.
@Stranik @Remah
Vielen Dank für Ihre Antworten.
Die URL der Website ist kein Geheimnis – https://forum.cuba-platform.cn/.
Sie hat eine .cn-Domain, der Server befindet sich in Hongkong und es wird ausschließlich Chinesisch verwendet.
Ich gehe davon aus, dass dein Problem jetzt behoben ist, da ich nach deinen Themen suchen und sie finden kann. Sie stehen nur etwas weiter unten in den Suchergebnissen als erwartet: Die von mir gesuchten Themen befanden sich bereits auf Seite 2 der Suchergebnisse, selbst bei exakter Übereinstimmung mit dem Titel des Themas.
Wahrscheinlich hat deine Website bei Baidu noch nicht genügend Reputation erworben. Oder gibt es bei Baidu weitere Anforderungen, die deine Website noch nicht erfüllt?
Welche Suchanfragen haben Sie eingegeben, bei denen unser Forum angezeigt wird? Ich prüfe das so: Geben Sie bei der Baidu-Suche die Anfrage site:forum.cuba-platform.cn ein. Momentan sehe ich nur 5 Links, und keiner davon führt zu Themen.
In der Zwischenzeit haben wir die Empfehlungen von Baidu befolgt und ein Tool implementiert, das neue URLs mithilfe von cURL an Baidu übermittelt. Ich melde mich bald mit den Ergebnissen.
Du hast recht, dass Themen nicht indiziert werden. Baidu findet die Thementitel in den Listenansichten der Themen, aber nicht in der Themenansicht.
Ich weiß nicht, warum Baidu eine Themenliste indizieren würde, aber kein Thema? Das bedeutet, dass der Crawler auf deiner Website arbeitet, aber keine Themen durchsucht. Überprüfe daher zuerst deine Website-Konfiguration.
Wir haben dasselbe Problem.