Il faut que je mette le son de la freebox a fond et mon ampli à une faible atténuation (en dB) pour avoir un volume "normal"...
De quoi cela peut il venir? 
Bizarre, t'es branché comment sur ton ampli ? RCA ou optique ?
Ca se produit en regardant la TV ou bien avec le freeplayer ?
Si freeplayer seulement, sur des vidéos ou des fichiers audio ? Sur ton pc, le son te semble correct (pas besoin de monter le volume ?
Regarde voir aussi la configuration de ta freebox TV, des fois que ...
Sinon ton ampli a pas de réglage d'atténuation spécifique à l'entrée utilisée ?