Descobri o problema.
O erro nao estava no servidor e sim no cliente, eu precisava apontar as conexoes para localhost e nao para o servidor, por exemplo:
tunnel 5532:my.server:5432
A conexao com o Postgres fica localhost:5532, ainda estou em testes mas ja percebi um ganho de performace em torno de 40%.
De qquer forma obrigado pela ajuda.