S3-Migration-Fehler bei Oneboxed-Posts

simonk · 19. Oktober 2020 um 14:47

Hallo zusammen,

ich versuche, von der lokalen Upload-Speicherung auf S3 zu migrieren, und verwende dafür den Befehl rake uploads:migrate_to_s3. Der Vorgang schlägt derzeit bei den migration_successful?-Prüfungen mit folgender Fehlermeldung fehl:

1 posts are not remapped to new S3 upload URL. S3 migration failed for db 'default'

github.com/discourse/discourse

lib/file_store/to_s3_migration.rb

v2.6.0.beta4


      
          count = Upload.by_users.where("url NOT LIKE '#{base_url}%'").count
          if count > 0
            error_message = "#{count} of #{Upload.count} uploads are not migrated to S3. #{failure_message}"
            raise_or_log(error_message, should_raise)
            success = false
          end
          
          cdn_path = SiteSetting.cdn_path("/uploads/#{@current_db}/original").sub(/https?:/, "")
          count = Post.where("cooked LIKE '%#{cdn_path}%'").count
          if count > 0
            error_message = "#{count} posts are not remapped to new S3 upload URL. #{failure_message}"
            raise_or_log(error_message, should_raise)
            success = false
          end
          
          Discourse::Application.load_tasks unless Rake::Task.task_defined?(MISSING_UPLOADS_RAKE_TASK_NAME)
          Rake::Task[MISSING_UPLOADS_RAKE_TASK_NAME]
          count = DB.query_single(<<~SQL, Post::MISSING_UPLOADS, Post::MISSING_UPLOADS_IGNORED).first
            SELECT COUNT(1)
            FROM posts p
            WHERE EXISTS (

Meine Seite nutzt kein CDN, daher sucht der entsprechende Teil des Skripts einfach nach Beiträgen, deren aufbereiteter Inhalt /uploads/default/original enthält.

Ich habe das Skript so angepasst, dass es den fehlerhaften Beitrag anzeigt. Es handelte sich dabei um einen Beitrag, der eine Onebox zu einem anderen Discourse-Forum enthielt. Das aufbereitete HTML beinhaltete einen Link zum Logo des anderen Forums. Da auch dieses Forum kein CDN nutzt, enthält die Logo-URL genau diese Zeichenkette.

Der Test scheint so angepasst werden zu müssen, dass er nur lokale Referenzen erfasst. Vielleicht sollte er in zwei Tests aufgeteilt werden: einen für absolute URLs, die den Seitennamen enthalten, und einen für relative Verweise?

Vielen Dank im Voraus für jegliche Vorschläge.

Thema		Antworten	Aufrufe
False positives on "posts are not remapped to new S3 upload URL" Bug s3	5	141	22. Juni 2025
Migrate_to_s3 fails Self-hosting s3	26	1972	22. Februar 2022
Migrating old uploads to S3 Self-hosting s3	8	1619	11. Mai 2021
Migrate to s3 failed - but only check fails Bug	0	33	23. Januar 2026
Migrate_to_S3 Fails on Rebake Self-hosting	17	2483	10. September 2022

S3-Migration-Fehler bei Oneboxed-Posts

Verwandte Themen