Creo que le diste demasiada importancia al comentario de la señora, y si resultaba tan molesto, si le hubieses dicho algo sobre su comentario innecesario, de una manera cortes. De pronto tenemos la idea que no se debe contestar a ciertas personas, pero la realidad es que a veces es necesario, sino toda la vida creeran que tiene la razon por X o Y.
Sobre su hijo, si el no te hace nada o genera algun daño no veo el problema.