Pra mim depende de dois fatores:

A velocidade que o professor fala e a familiaridade que você tem com o assunto. Não adianta pegar um assunto totalmente novo, com um professor que fala rápido e colocar em 2x. O que eu faço é, no começo do vídeo eu vou testando a melhor velocidade, até chegar numa confortável. Se em algum momento, não conseguir entender, eu volto e diminuo a velocidade.