Você pode colocar essas configurações na seção env do app.yml e elas não ficarão visíveis na interface do usuário.
Consulte Usando Armazenamento de Objetos para Uploads (Clones S3) para exemplos. Todas as configurações do site podem ser sobrescritas e ocultadas dessa forma.