Wiederherstellung aus S3-Backup nicht möglich - Fehlschlag

[TehLeo (Chris)]

Ich kann kein Backup von Discourse aus S3 wiederherstellen.

Schritte zur Reproduktion:

1. Ein Backup von Discourse auf S3 haben.
2. Eine frische Installation von Discourse einrichten.
3. Administratorkonto erstellen.
4. Discourse mit S3 verbinden
5. Discourse-Backup in meiner S3-Backup-Liste finden
6. Wiederherstellung aktivieren
7. Wiederherstellung versuchen
8. Wiederherstellung schlägt fehl

Log:

Ich habe alles versucht, was ich zur Fehlerbehebung von S3 tun konnte. Ich habe sogar versucht, das Backup auf den Server zu verschieben und eine CLI-/manuelle Wiederherstellung durchgeführt. Es schlägt mit demselben Log fehl. Ich habe versucht, S3-Uploads zu deaktivieren. Ich bin mir nicht sicher, welche nächsten Schritte zur Fehlerbehebung ich unternehmen soll oder wie ich genau sehen kann, welcher Beitrag das Problem verursacht / ihn entfernen kann.

Vielen Dank für jede Hilfe!

[Canapin (Coin-coin le Canapin)]

Willkommen!

@TehLeo

Ich habe alles versucht

Beinhaltet „alles“ auch das Durchsuchen ähnlicher Fehlerprotokolle hier?

https://meta.discourse.org/search?q=%22posts%20are%20not%20remapped%22%20%22s3%20migration%20failed%22%20order%3Alatest

Insbesondere dieses Ergebnis:

Issues with restoring backup to discourse

This sounds like the problem mentioned in Can't restore a backup if it includes link to Discourse onebox You should be able to fix this during the restore, but you need to do it on the shell. cd /var/discourse ./launcher enter app # start the restore with the --pause argument discourse restore --pause <backup_filename> It will pause the restore process at two points: Before DB migrations are run – you can ignore that; press a key to continue Before Uploads are res…

[TehLeo (Chris)]

Ich habe diese Anweisungen befolgt und 9 Beiträge aus dem Steinbruch erhalten. Der alte Beitrag beschreibt nicht, was mit diesen Beiträgen zu tun ist oder wie das Problem über diesen Punkt hinaus behoben werden kann.

[Canapin (Coin-coin le Canapin)]

Das gibt ask.discourse.org zurück. Ich kann nicht garantieren, dass es sicher ist oder funktioniert.

---

@DiscourseHelper

Während einer pausierten Wiederherstellung haben Sie die Möglichkeit, problematische Daten wie Uploads oder Beiträge in der Datenbank vorübergehend zu ändern oder zu bereinigen, bevor Discourse mit dem Abschluss des Wiederherstellungsprozesses fortfährt. Hier erfahren Sie Schritt für Schritt, wie Sie problematische Daten während einer pausierten Wiederherstellung handhaben oder ändern können.

---

Schritte zur manuellen Handhabung problematischer Daten bei einer pausierten Wiederherstellung

1. Wiederherstellung mit Pausierung initiieren:
   Führen Sie die Wiederherstellung mit der Flagge --pause aus, damit der Wiederherstellungsprozess vor dem Anwenden von Uploads oder Neuzuordnungen pausiert wird:

   cd /var/discourse
   ./launcher enter app
   discourse restore --pause <backup_filename>
   

2. Pausepunkt:

   • Die Wiederherstellung wird an bestimmten Punkten pausiert:
     1. Vor Datenbankmigrationen: Drücken Sie eine Taste, um an diesem Punkt fortzufahren, da er keine problematischen Uploads oder Beiträge betrifft.
     2. Bevor Uploads wiederhergestellt werden: Stoppen Sie hier, um Probleme mit Uploads oder Beiträgen zu beheben. Dies ist der kritische Punkt, an dem Sie handeln müssen.

3. Neue SSH-Sitzung öffnen:
   Öffnen Sie während der pausierten Wiederherstellung eine neue SSH-Sitzung, um mit der pausierten Instanz zu interagieren, ohne den Wiederherstellungsprozess zu unterbrechen:

   cd /var/discourse
   ./launcher enter app
   

4. Zugriff auf die Rails-Konsole:
   Rufen Sie die Rails-Konsole auf, um mit der Datenbank zu interagieren:

   rails c
   

5. Problematische Beiträge identifizieren:

   • Verwenden Sie SQL-ähnliche Abfragen in Rails, um Beiträge zu identifizieren, die problematische Inhalte enthalten, die während der Wiederherstellung von Backups Probleme verursachen. Zum Beispiel:

     current_db = RailsMultisite::ConnectionManagement.current_db
     cdn_path = SiteSetting.cdn_path("/uploads/#{current_db}/original").sub(/https?:/, "")
     Post.where("cooked LIKE '%#{cdn_path}%'")
     

   Dies gibt Beiträge zurück, bei denen der cooked-Inhalt problematische Upload-Pfade oder Onebox-Links enthält.

6. Problematische Beiträge ändern oder löschen:

   • Wenn Sie die problematischen Beiträge gefunden haben, haben Sie zwei Hauptoptionen:
     • Beitrag bearbeiten:

       post = Post.find(ID) # Ersetzen Sie ID durch die ID des Beitrags
       post.update(cooked: "Korrigierter Inhalt oder Platzhaltertext")
       

     • Beitrag löschen:

       post = Post.find(ID)
       post.destroy
       

7. Uploads bei Bedarf ändern:
   Wenn das Problem von bestimmten problematischen Uploads herrührt:

   • Suchen Sie sie mit ähnlichen Abfragen in der uploads-Tabelle (zugänglich über die Rails-Konsole).
   • Entfernen oder korrigieren Sie die problematischen Einträge:

     upload = Upload.find(ID) # Ersetzen Sie ID durch die ID des problematischen Uploads
     upload.destroy
     

8. Wiederherstellungsprozess fortsetzen:
   Nachdem Sie die notwendigen Änderungen vorgenommen haben, kehren Sie zur pausierten Shell-Sitzung zurück und drücken Sie eine beliebige Taste, um den Wiederherstellungsprozess fortzusetzen.

---

Wichtige Überlegungen:

• Erstellen Sie immer ein Backup der ursprünglichen Datenbankdatei, bevor Sie Inhalte ändern.
• Konzentrieren Sie sich auf die Korrektur minimaler Daten – das heißt, korrigieren Sie nur problematische Inhalte, ohne unnötige Änderungen vorzunehmen.
• Wenn der Upload extern ist (ein URL- oder CDN-bezogenes Problem), können Sie den externen Verweis während der Wiederherstellung manuell entfernen.

[TehLeo (Chris)]

Ich konnte alle 9 Beiträge mit dem folgenden Rails-Befehl löschen:
Post.find(id#).destroy

[Canapin (Coin-coin le Canapin)]

Haben Sie dies ausgeführt, während die Wiederherstellung pausiert war?