Errore di migrazione S3 con post oneboxed

simonk · 19 Ottobre 2020, 2:47pm

Ciao a tutti,

Sto cercando di migrare dall’archiviazione locale dei file a S3 usando il comando rake uploads:migrate_to_s3. Al momento fallisce durante i controlli migration_successful? con questo errore:

1 post non è stato rimappato al nuovo URL di caricamento S3. La migrazione S3 è fallita per il db 'default'

github.com/discourse/discourse

lib/file_store/to_s3_migration.rb

v2.6.0.beta4


      
          count = Upload.by_users.where("url NOT LIKE '#{base_url}%'").count
          if count > 0
            error_message = "#{count} of #{Upload.count} uploads are not migrated to S3. #{failure_message}"
            raise_or_log(error_message, should_raise)
            success = false
          end
          
          cdn_path = SiteSetting.cdn_path("/uploads/#{@current_db}/original").sub(/https?:/, "")
          count = Post.where("cooked LIKE '%#{cdn_path}%'").count
          if count > 0
            error_message = "#{count} posts are not remapped to new S3 upload URL. #{failure_message}"
            raise_or_log(error_message, should_raise)
            success = false
          end
          
          Discourse::Application.load_tasks unless Rake::Task.task_defined?(MISSING_UPLOADS_RAKE_TASK_NAME)
          Rake::Task[MISSING_UPLOADS_RAKE_TASK_NAME]
          count = DB.query_single(<<~SQL, Post::MISSING_UPLOADS, Post::MISSING_UPLOADS_IGNORED).first
            SELECT COUNT(1)
            FROM posts p
            WHERE EXISTS (

Il mio sito non utilizza una CDN, quindi quella parte dello script cerca semplicemente i post in cui il contenuto “cotto” (cooked) contiene /uploads/default/original.

Ho modificato lo script per visualizzare il post che stava fallendo, ed è risultato essere un post che includeva un onebox verso un altro forum Discourse. L’HTML “cotto” includeva un link al logo dell’altro forum. Anche l’altro forum non utilizza una CDN, quindi l’URL del logo include quella stringa.

Sembra che il test debba essere reso più rigoroso in qualche modo, in modo da selezionare solo i riferimenti locali. Forse dovrebbe essere diviso in due test: uno per gli URL assoluti che includono il nome del sito e uno per i riferimenti relativi?

Grazie in anticipo per qualsiasi suggerimento.

Argomento		Risposte	Visualizzazioni
False positives on "posts are not remapped to new S3 upload URL" Bug s3	5	141	Giugno 22, 2025
Migrate_to_s3 fails Self-hosting s3	26	1972	Febbraio 22, 2022
Migrating old uploads to S3 Self-hosting s3	8	1619	Maggio 11, 2021
Migrate to s3 failed - but only check fails Bug	0	33	Gennaio 23, 2026
Migrate_to_S3 Fails on Rebake Self-hosting	17	2483	Settembre 10, 2022

Errore di migrazione S3 con post oneboxed

Argomenti correlati