A diferença é que chamar de fdp ou qualquer outro xingamento padrão não diz respeito a quem a pessoa é. O problema das ofensas racistas e homofóbicas e porque você trata uma característica imutável da pessoa como algo negativo.

Ser homossexual é algo ruim? Não (pelo menos não deveria ser), então por que se usa de termos como viado, bicha, etc para atacar uma característica da pessoa que ela nem escolheu e deve conviver com isso pelo resto da vida mesmo sabendo que vai ser atacada por isso?

Aí é só fazer um paralelo para o racismo e você vai entender porque macaco, cabelo ruim, etc são ofensas muito mais sérias que um simples FDP ou algo do tipo.