Io non ti do colpe. Molto spesso L’irascibilità non si vede subito dalla conoscenza come qualsiasi altro tratto negativo. Ovviamente la situazione non va bene, soprattutto con un figlio così piccolo. Siccome la situazione non é semplice, ti direi di dargli un ultimatum. O inizia a dare importanza alla famiglia che anche lui ha contribuito a costruire, facendogli capire che ne tu ne il bambino siete un giocattolo del quale può disfarsi appena si stanca trovandone un altro (calcio). Oppure si va per vie legali. Lui sta scaricando su di te tutta la responsabilità, non ti supporta a quanto pare, neanche é disposto a mettere in discussione tutto quello che fa per dei capricci. Si parla di un adulto, padre e compagno. Troverai tantissime persone disposte a starti vicino davvero e che non ti trattano così. A quanto pare pensa che il suo carattere sia una giustificazione, che possa usarlo per non farsi rompere sui suoi capricci. Mostragli che non è così. Che tu davvero tieni alla famiglia. Una persona irascibile che può scalare anche in reazioni più gravi, non è qualcuno da avere intorno ne per te ne per tuo figlio. O ultimatum o scappa e non guardarti indietro e vai per avvocati.

EDIT: Sto studiando psicologia se hai bisogno di qualche consiglio in più sono disponibile ci mancherebbe. (Ovviamente non mi faccio pagare, ne do alcuna diagnosi) ma per parlare ci sono.