Olá,
Não vou responder sua pergunta, mas ontem estava lendo um artigo sobre o Ubuntu e no final os caras comentaram a respeito do mesmo problema que você, parece-me que isto é até um bug ou os caras que desenvolvem o Ubuntu não estão muito preocupados com os mouses seriais
Mas dê uma olhada no link
http://br-linux.org/linux/analise-ubuntu-breezy nos comentários que você vai encontrar mais detalhes do porquê.