O fato de ter falhado em conectar após apenas 3ms significa que o problema está no host ou muito perto dele.
Quais alterações você fez no host? Você iniciou um firewall? Talvez ele esteja substituindo as regras de encaminhamento necessárias para o docker.
Comece examinando a conectividade IP do contêiner.