@Magnetidog Acabei de conseguir fazer funcionar.
Basicamente, criei a distribuição do AWS Cloudfront conforme explicado neste vídeo (https://www.youtube.com/watch?v=KIltfPRpTi4).
Em seguida, fui ao painel administrativo e adicionei minha URL do Cloudfront à chave s3 cdn url.
Depois, entrei no container e rebakei todos os posts com rake posts:rebake (levou cerca de 10 minutos para cada 7000 posts).
Também tentei fazer isso em lotes no Rails Console, mas, por algum motivo, não funcionou: Post.in_batches.update_all('baked_version = NULL') (nada aconteceu 
:male_sign:)