Je pense que la question était comment virer les #, pas le fichier. Si c'est le cas alors la commande est :
mv \#monfichier.conf\# monfichier.conf
Mais comme on te la déjà dit, c'est un fichier de sauvegarde, donc tu devrais déjà avoir monfichier.conf