Je migre une grande quantité de contenu, environ 15 000 articles d’actualités, vers Discourse via l’API. Ces sujets contiennent des liens vers des images. Les images ont simplement été téléchargées dans un stockage blob et sont entièrement accessibles publiquement.
La plupart des sujets affichent correctement les images, qui sont téléchargées par hotlink et importées dans Discourse comme prévu. Cependant, certaines ne dépassent pas l’étape où elles s’affichent simplement comme des liens dans le sujet, ou finissent par apparaître comme des images brisées pour une raison quelconque.
Configuration :
Installation vierge de Discourse uniquement pour tester la migration
Stockage des images sur S3
Je n’ai rencontré aucun problème en créant simplement des publications en tant qu’utilisateur et en téléchargeant des images. Le problème semble survenir uniquement lors de la migration de publications via l’API, c’est-à-dire en masse et à la suite (j’utilise le paramètre skip_validations=true). Jusqu’à présent, j’ai migré au maximum 1 000 sujets avant de tout effacer et de recommencer.
Avez-vous des idées sur ce qui pourrait causer cela ? Ou des conseils pour diagnostiquer le problème ? Tous les jobs Hotlink Sidekiq semblent être planifiés et exécutés comme prévu.
Merci Robert. Cela fonctionne pour les premiers que j’ai essayés. On revient à la case départ, c’est-à-dire au rendu de l’image liée en hotlink, puis à son téléchargement et à son upload.
Je devrai voir si cela peut être automatisé, bien que cela ne résolve pas la cause racine de l’échec initial.
C’est fantastique et félicitations, heureusement, j’ai appris cela d’autres personnes utiles ici lorsque j’ai rencontré des problèmes similaires, et je suis ravi de pouvoir vous le transmettre
D’accord, j’ai corrigé tous les posts migrés via l’API en utilisant /posts/{num}/rebake. Étrangement, la commande rake posts:rebake dans le conteneur n’a pas fonctionné.
Après avoir automatisé l’appel à l’API de rebake, il s’est avéré qu’il y a un taux d’échec d’envoi d’images d’environ 80 %. C’est assez fou.
Finalement, cela s’est avéré peu fiable : cela fonctionnait pour quelques publications, mais pas pour toutes. Je devrai réessayer de télécharger les images. J’avais déjà rencontré des problèmes avec cela, les requêtes restant bloquées. Je ne sais pas si j’avais essayé le paramètre skip_validations sur ces requêtes.
heureusement, j’ai appris cela d’autres personnes utiles ici lorsque j’ai rencontré des problèmes similaires, et je suis ravi de pouvoir vous le transmettre 