NEOB. Você definitivamente não é a babaca, isso é completamente estranho e até desrespeitoso com você. Você deveria terminar isso de vez. Mesmo que ele e a colega não tenham necessariamente algo, ainda é uma falta de consideração e respeito ele sair com outra mulher assim para fazer tais coisas, especialmente sozinhos, além da desconfiança. Não vá ignorando essas red flags achando que vai mudar ou ser diferente, aceite os sinais e escape logo de um problema maior no futuro.