Hmmm, es scheint tatsächlich zu funktionieren… obwohl ich heute Morgen auf ein ernstes Problem gestoßen bin… plötzlich ist meine Festplattennutzung um 25 % gestiegen und hat das Laufwerk vollgelaufen, wodurch das Forum komplett abgestürzt ist.
Im Moment, wenn ich den Rake-Befehl ausführe, scheint es, als würden die Bilder genau während des Batch-Laufs heruntergeladen/hochgeladen. Ich gebe den rake-Befehl ein, es werden genau 300 Bilder verarbeitet (ich führe sie in Batches von 300 aus), und dann endet der Vorgang.
Die wichtige Frage ist also: Könnte man diese Downloads von S3 auf die lokale Festplatte einfach in eine Warteschlange stellen? Könnte sich dadurch ein Batch angesammelt haben, der dann um 5 Uhr morgens ausgeführt wurde und mein Forum zum Absturz gebracht hat? 