Судя по вашему описанию, скорее всего, ваш сервер при выполнении DNS-запросов разрешает записи IPv6 (мы используем для этого getaddrinfo). Однако при попытке подключиться к ним соединение не удаётся.
Возможно, это связано с тем, что он сначала пытается использовать адрес ip6, терпит неудачу, а затем возвращается к адресу ip4. В FinalDestination#resolve у нас пока нет подобной логики резервного копирования: