Просто для документирования найденного решения. Чтобы отключить letsencrypt и ssl внутри docker, просто закомментируйте
templates:
- templates/postgres.template.yml
- templates/redis.template.yml
- templates/web.template.yml
# - templates/web.ratelimited.template.yml
# - templates/web.ssl.template.yml
# - templates/web.letsencrypt.ssl.template.yml