Ich habe unsere Foren gerade für die Google-Suche freigegeben und die Search Console verwendet, um unsere Seite zu indexieren. (Ich bin mir nicht sicher, ob es noch andere Dinge gibt, die ich tun sollte ¯\_(ツ)_/¯ (Habt ihr Vorschläge?)
Hier ist das Feedback, das ich von der Google Search Console erhalten habe:
Ich weiß nicht, ob das für meine Frage relevant ist, aber eine weitere Sache, die man beachten sollte, ist, dass ich SSO verwende und WordPress als Anbieter nutze. Würde das hier einen Unterschied machen?
In diesen Dateien wird Google nicht blockiert. Sie können dies selbst mit Scannern für robots.txt von Drittanbietern überprüfen, zum Beispiel mit diesem Tool von Ryte.
Dies bestätigt, dass die robots.txt den Googlebot nicht blockiert:
Da dein Forum so lange den Login erforderte und/oder das Indexieren blockiert hat, wird es eine Weile dauern, bis der Crawler deine robots.txt-Datei erneut überprüft und feststellt, dass die Sperre aufgehoben wurde. Dort gibt es wahrscheinlich einen Button, um eine erneute Überprüfung anzufordern, oder du kannst einfach warten.