@Magnetidog 動作するようになりました。
基本的には、この動画 で説明されている通り、AWS CloudFront のディストリビューションを作成しました。
その後、管理画面に移動し、s3 cdn url キーに CloudFront の URL を追加しました。
次に、コンテナに入り、rake posts:rebake ですべての投稿を再構築しました（投稿 7000 件あたり約 10 分かかりました）。
また、Rails コンソールでバッチ処理を試みましたが、何らかの理由で動作しませんでした：Post.in_batches.update_all('baked_version = NULL')（何も変化しませんでした🤷🏻♂）