@Magnetidog Мне наконец удалось заставить это работать.
Я создал дистрибуцию AWS Cloudfront, следуя инструкциям из этого видео.
Затем я зашёл в панель администратора и добавил URL Cloudfront в ключ s3 cdn url.
После этого я зашёл в контейнер и перезапустил все посты с помощью команды rake posts:rebake (это заняло около 10 минут на каждые 7000 постов).
Я также пробовал выполнять это пакетами через консоль Rails, но по какой-то причине это не сработало: Post.in_batches.update_all('baked_version = NULL') (ничего не произошло 
:male_sign:)