Posso converter 128kbps para 320kbps?
Você não pode simplesmente removê-los a 320kbps. O novo arquivo será muito maior, mas não conterá um único byte de informações musicais mais do que a versão de 128kbps. Arquivo maior, sem aumento da qualidade do áudio. Em outras palavras, é um exercício totalmente inútil.
A conversão de arquivos de áudio perde a qualidade?
Você está, com efeito, convertendo de um formato de arquivo com perdas para outro. Na maioria dos casos, haverá perda adicional durante a conversão, mas a maioria das pessoas não será capaz de discernir a diferença. Cada conversão reduzirá a qualidade do áudio.