Ich habe mir unser Forum in Ahrefs angesehen, das über „KI-Zitate“ berichtet, und Folgendes gesehen:
Ich habe meine Einstellungen überprüft und Folgendes gefunden:
Hat hier jemand Erfahrung damit? Bedeutet die Drosselung der Bots, dass sie das Forum gar nicht indexieren? Hat jemand die Drosselung entfernt und kann etwas über die Auswirkungen auf Ressourcen und KI-Zitate sagen? Danke.
Nein, das bedeutet es nicht. Das Drosseln stoppt, je nachdem, wie es durchgeführt wurde, da robots.txt zahnlos ist, können Bots als Mini-DDoS-Angriffe fungieren.
Es gibt drei Gründe, warum Sie keine KI-Zitate erhalten:
Ahrefs ist eines dieser Unternehmen, deren Bot von vornherein gesperrt werden sollte. Das ist einer von vielen Gründen, warum die Annahme „Ahrefs liegt falsch“ eine dieser drei ist.
Und soweit ich weiß, sind sie in Discourse standardmäßig blockiert:
Also ja, der ahrefs-Bericht ist wahrscheinlich unzuverlässig.
Warum sie sich dafür entscheiden, Ihnen nicht mitzuteilen, dass sie keine Daten abrufen konnten, sondern stattdessen fälschlicherweise „0“ melden… nun, das ist eine Frage für sie.
Sie können ihren Bot entsperren, aber seien Sie auf gelegentliche Mini-DDoS-Angriffe, erhöhte Seitenaufrufe und Serverauslastung vorbereitet.
Der ahrefs-Bot muss unser Forum nicht indexieren können, da er nur darüber berichtet, was er bei Google sieht.
Es wäre sehr ungewöhnlich, wenn das der Fall wäre, da unser Forum jährlich ein paar Millionen Aufrufe erhält … weshalb ich mich nach aktiver KI-Bot-Blockierung erkundige. Oder vielleicht ist das Framework anderweitig technisch unfreundlich für die KI-Scraper, wie zum Beispiel das JS-Rendering usw.
Können die Bots tatsächlich Ihre Foren zitieren?
Wenn ja, liegt das Problem bei ahrefs. Das bleibt meine Vermutung, die Funktion AI Citations ist noch recht neu und funktioniert möglicherweise noch nicht.
Wenn nicht, könnte etwas anderes nicht stimmen. Versuchen Sie in diesem Fall ein paar andere Discourse-Foren. Wenn diese angezeigt werden, liegt das Problem nicht am Framework, sondern an etwas Spezifischem für Ihre Website.
Was es wert ist, hier ist, was ChatGPT mir für eine Beispielabfrage zu Meta liefert:
Nein, das ist es nicht. Und das ist nicht so viel. Ich hatte 3,5 Millionen pro Jahr, wenn mit Aufrufen Suchanfragen von Google gemeint sind. Wenn damit Benutzerbesuche gemeint sind, ist das auch nicht viel. Wenn damit Bot-Besuche gemeint sind, ist es sogar wenig. Außerdem bedeuten Aufrufe nicht, dass eine KI Ihr Forum definitiv als zitierte Quelle verwenden würde. Es hängt davon ab, welche Art von Inhalten Sie dort haben.
Aber das ist nichts, wonach man hier fragen kann. Nur Ahrefs weiß, wie sie ihre Metriken zählen.
Außerdem sieht Ahrefs nicht über Google, wie oft eine KI zitiert hat.
Sie sagen also, 3,5 Millionen sind auch nicht „so viele“ oder wird die Zahl irgendwo zwischen 2 und 3,5 Millionen signifikant? Lol.
Einzigartige Besucher von Google übrigens… und unsere andere Seite mit weitaus weniger Besuchern ist überall in AI Answers zu finden… und ahrefs berichtet darüber (wer weiß, wie genau)… es ist einfach seltsam, eine größere Seite mit 0 für alle Zitate zu haben, wenn ich eine kleinere mit viel mehr habe…
Wie auch immer, ich würde gerne von Discourse-Webmastern hören, die direkte Kenntnisse zu diesem Thema haben. Nutzt noch jemand ahrefs und sieht Nicht-Null-Werte für KI-Zitate für sein Forum/seine Foren?? Danke.
Oder sollte ich sagen, es war ein sehr dummer Zählfehler 
Aber zu meiner Verteidigung, es war Nacht hier, als ich das berechnet habe.
Entschuldigung.
Ich bekomme 10.000 pro Monat, und das ist nicht so viel – aber es ist tatsächlich signifikant weniger pro Jahr als 3,5 Millionen.
Möglicherweise relevant:
https://www.gsqi.com/marketing-blog/ai-search-javascript-rendering/
Dies dürfte für Discourse-Foren kein Problem darstellen, da es eine Crawler-Ansicht für alle Crawler rendert, die einen bot-ähnlichen User-Agent verwenden.
Wenn sie natürlich erlaubt sind.
