Sí, la idea es que usar S3 sin una CDN es un error obvio y cualquiera que esté pagando por S3 en una instancia de producción puede permitirse pagar por S3 y una CDN por menos dinero.
Una posible solución si de alguna manera estás atrapado en S3 sin una CDN es establecer s3 cdn url en la URL del bucket, de modo que se convierta en una operación nula.