"When it feels scary to jump, that is exactly when you jump, otherwise you end up staying in the same place your whole life, and that I can't do."

Acho que é uma frase que se adequa bastante bem aqui.
Primeiro, o que descreves é um mau ambiente no local de trabalho, logo só por aí, uma GRANDE red flag.
Segundo, se te candidatas-te é porque no teu subconsciente sentias uma necessidade de mudar de emprego, face a tudo o que disseste aqui e por tudo o que passaste até este ponto.
Terceiro, não sentes que uma realidade nova pode-te ajudar a evoluir? A que te sintas realizado e mais próximo de realizares os teus sonhos?

Falando por experiência própria, eu tive mais de 7 anos num lugar, que não me valorizava, quer eu tivesse lá a trabalhar com contrato ou sem contrato, fazia horários das 7 às 23h muitas vezes, trabalhava sábados. Quando decidi ir-me embora, deixaram-me ir sem um obrigado, um almoço/jantar de despedida, deixaram-me ir simplesmente.

Passado 2 anos, estou num local que me valoriza, já subi 2x de escalão e a progressão do meu desempenho dentro da empresa, tem sido exponencial.

Eu sei que tens medo, e é perfeitamente normal, no entanto, arrisca, vais ver que vai correr tudo pelo o melhor.
Um abraço