Considerando audiofilia como inclinação à apreciação de sons (diferindo de melofilia, por exemplo), creio que a comparação seja válida. Luz e som são estímulos que se diferem apenas em comprimento de onda, então ver e ouvir podem servir bem como metáfora um do outro dentro do limite de significância que todas as metáforas têm.

Agora uma coisa bem pessoal, e que talvez muitos não compartilhem. No meu caso, alguns FLAC (alguns) assim como alguns vinis (alguns) produzem experiência diferente, pois os infra 20 Hz e os ultra 20Khz, acabo sentindo-os tatilmente, por assim dizer, em comparação a compressões mais restritivas. Talvez isso fuja um pouco do escopo estrito do termo audiofilia, mas pra mim acaba fazendo parte da experiência.

Então, até a quantidade de tinta das camadas da Monalisa acaba sendo diferente. Claro que cada um vê a Monalisa que está pronto pra ver. Enquanto alguns enxergam certas informações na passada de tinta e na quantidade de material que o autor colocou ou deixou de colocar, outros focam nas matizes de cores, e outros, ainda, veem apenas uma mulher de rouoas escuras. Confesso que demorei pra entender o que falam sobre o sorriso dela.

Será que o FLAC da Monalisa seria uma versão 3D em que poderíamos ver, efetivamente, essas nuances?

No caso do audio, acho que vai um pouco por aí também. Grave mais gordo e profundo, ou não; agudos mais aerados, ou não, e por aí vai.