Solo para documentar la solución que encontré. Para deshabilitar Let’s Encrypt y SSL dentro de Docker, simplemente comenta
templates:
- templates/postgres.template.yml
- templates/redis.template.yml
- templates/web.template.yml
# - templates/web.ratelimited.template.yml
# - templates/web.ssl.template.yml
# - templates/web.letsencrypt.ssl.template.yml