Grazie per questa spiegazione. 
Quindi, sono quasi alle mie 55 ore di rifacimento dei miei post contenenti [img] con un ritardo di 5 secondi tra ogni iterazione dei miei 40000 post dal mio script rails.
Da quello che vedo, funziona molto meglio di prima. La maggior parte delle immagini valide (escludo Imageshack e il suo comportamento erratico) sembra essere caricata sul mio forum senza intoppi almeno a prima vista, ma darò un’occhiata più approfondita per essere sicuro al 100%. Ciò che è sicuro al 100% è che i risultati sono molto, molto migliori e coerenti.
Quindi sospetto che il problema che ho riscontrato (e forse il problema di @Amethi) che era la casualità nel download di immagini remote con invalidate_broken_images fosse correlato a una sorta di limite di frequenza da vari provider di hosting di immagini…? 
La cosa strana è che non ho notato alcun problema con i miei altri forum importati… 
Detto questo, se i risultati sono sufficientemente soddisfacenti e il ritardo migliora davvero il download di immagini remote, userò lo stesso metodo sul mio forum di produzione, ma aumenterò il tempo tra ogni post rifatto da 5 secondi a 10 o 15 secondi (o anche di più, non abbiamo fretta, questi sono tutti post piuttosto vecchi e il VPS ha specifiche molto inferiori rispetto al mio computer).
Non voglio essere troppo frettoloso nel trarre conclusioni, ma la soluzione al mio problema iniziale potrebbe essere quella di applicare sia la soluzione proposta da Richard SIA aggiungere un ritardo tra ogni rifacimento di post.