La configuración de S3 está en app.yml. No en la configuración del sitio.
Edición:
Me doy cuenta de que no estoy siendo demasiado explicativo y no tengo la intención de ocultar detalles.
Utilizamos OVH S3 y está configurado en app.yml.
Hice una copia de seguridad de nuestro foro de prueba sin las cargas, pero en ese momento S3 seguía estando activado.
Luego lo restauré en el nuevo sitio con el mismo app.yml y fue allí donde comenzó el problema. Para ser claro, está solucionado ahora mismo, pero no estoy seguro de si fue porque lo volví a crear varias veces o si Discourse hacía caché de forma agresiva. Por eso necesito saber cómo hacerlo correctamente y acertar a la primera. Mi temor es que, si alguna vez necesito restaurar una copia de seguridad en nuestra instancia de producción y nos encontramos con esto, necesite saber exactamente cómo solucionarlo lo antes posible antes de que los usuarios lo noten.