Amigo, o que vale é a banda que você alocou para a máquina, nesse caso 128k.
Imagine assim, você tem um cano de aguá fino e uma caixa de agua para esvaziar, se você não tiver nada de áqua na caixa e jogar um copo de agua na caixa, a agua do copo vai passar rapidinho pelo cano, mas se você jogar um balde vai encher a caixa um pouco e demorar para esvaziar porque o cano é fino, com isso, se você colocar mais agua na caixa vai demorar mais ainda.
Claro que é uma analogia nada a ver, mas com link funciona da mesma maneira, valendo que você tem uma banda de 128k e está usando ela no máximo (limite), tudo que você requerer da internet vai demorar mais, porque os pacotes vão entrar na fila para passar pelo link.
Agora, se você não estiver navegando/puxando nada pelo link e der um ping, o ping deve ser normal (baixo). Não interessa se você tem um link de 1mega no seu gateway, interessa é a banda que você alocou para o PC.
O que nós da Avançar normalmente fazemos é alocar banda por porta e não por máquina, assim, você libera 128Kb para download na porta 80 (http), 21 (ftp), 22(ssh) e outras padrões de internet, mas para protocolo ICMP (ping), netbios (share windows), etc nós liberamos banda total (100mb). Claro que isso só vale para empresas, provedores devem alocar banda por máquina ao meu ver.
Espero ter ajudado.