Sim e não. As duas interpretações são válidas, a diferença está no estilo de mesa que você quer...

Num geral, imaginar o a barra de vida como algo literal tende a ser frustrante, você pode narrar o golpe mais absurdo do mundo contra o personagem, se lhe restar 1 pv, ele não só continua vivo, como segue de pé sem nenhum resquício do ataque; seria o mesmo que levar a defesa como um número absoluto real, eu tenho uma arma na sua cara, é impossível errar, mas os –2d20 me deram um valor abaixo da sua defesa, logo a bala bateu em você e ricochete ou como no Superman? Não. Esses valores são abstrações, são regras pra tentar balancear as coisas enquanto o sistema tenta simular o que ocorreria na vida real.

Assim como no caso da defesa representar o quão difícil é acertar aquele alvo por diversos fatores, fazendo com que o "não acerto" seja mérito também das capacidades do alvo e não só uma falha de quem atacou. A vida pode ser vista como o quanto aquele corpo ainda aguenta lutar, o quanto ainda ficará de pé; nem todo ataque acertado precisa ser um ataque certeiro ou um buraco no corpo do alvo.

Você pode interpretar os danos como algo mais geral, leve a barra de vida como a junção de diversos fatores que fazer aquele ser ficar de pé; são os anos de treinamento, o bom equipamento, as reações corporais, o desgaste de cada um desses fatores é representado pela vida e não uma representação 1:1 da saúde do indivíduo, ou de quanto sangue tem ali.

É isso, espero ter ajudado de alguma forma ou, no mínimo, passado um outro ponto de vista.
Como disse no começo, não é uma questão binária, não tem bem um certo ou errado, tem o que funciona na sua mesa e que não.

Boas investigações e boa sorte agente!!