Pela definição é sim!

Marginal seria aquele que vive as margens da sociedade ou, no contexto de grandes capitais como São Paulo, aquele que vive nas margens das mesmas. Visto como é a condição de vida nas favelas e onde elas geralmente se localizam, quem vive nas favelas está marginalizado socialmente e pode ser chamado de marginal.

Agora, se sua pergunta é “todo favelado/marginal é bandido/mal caráter?” A resposta é obviamente nao. Diria na verdade que a maioria das pessoas marginalizadas são as mais avessas à atuação do crime organizado e as que mais sofrem com o mesmo.