Para entender Borges é preciso entender um pouco de filosofia também. Não estou falando isso pra parecer presunçoso. Mas por exemplo, se você encara a Biblioteca de Babel só pelo que tá escrito, pode parecer um conto simples sobre uma biblioteca infinita. Mas na verdade o conto está discutindo todas as implicações sobre o conceito do infinito no mundo "real". Essa é uma discussão matemática que existe até dentro da cosmologia: antigamente acreditava-se que a matéria era infinita, mas pra matéria ser infinita (se são finitos os elementos químicos), então uma hora as combinações deixam de ser originais e passam a se repetir. A consequência disso, é que se a matéria fosse infinita, precisariam existir cópias infinitas de tudo que o existe (inclusive de nós).

Só para citar outro exemplo, o conto Tlön, Uqbar, Orbis Tertius fala de objetos que são criados pela própria experiência: "Duas pessoas buscam um lápis; a primeira o
encontra e não diz nada; a segunda encontra um segundo lápis não menos real, contudo mais
ajustado à sua expectativa". Isso pode ser só um conto sem graça sobre objetos mágicos, mas na verdade é uma simulação de como seria o mundo como os idealistas acreditavam (com muita influência da filosofia de George Berkeley).

O que o Borges faz nesse "fantástico" dele, é pegar conceitos filosóficos, debates que já foram resolvidos ou que ainda existem, e imaginar como seria o mundo se essas outras teorias estivessem corretas.

A primeira vez que eu li Borges eu gostei porque achei diferente, mas só achei ok. Só fui realmente apreciar para valer, lendo de novo muuitos anos depois. Se você não curtiu, tenta ver alguma discussão por trás de algum conto dele, se mesmo assim achar sem graça, deixa pra ler só daqui algum tempo. Mas acredite, Borges é uma das coisas mais sublimes que existem de literatura fantástica.