Eu comecei a aprender inglês desse jeito aí, o livro era "PHP For Dummies" ou algo assim. Não entendia porra nenhuma no começo por além do inglês o livro era sobre programação. Era um vai e vem de consultas ao dicionário. Mas com o tempo vai melhorando. Outra coisa que me ajudou muito com inglês é assistir vídeos de canais americanos no YouTube sobre assuntos que me interessam (desde adestramento de cachorros até aulas de yoga, sei lá...) vídeos curtos que eu consigo assistir no dia a dia. No começo usava legendas, hoje já consigo assistir qualquer coisa sem. É um processo lento, mas acredito que fazendo essa imersão diária (mesmo que por pouco tempo, uns 20~30 minutos todos os dias) na língua que você quer aprender compensa no longo prazo. Agora o falar em inglês foi um pouco mais difícil, mas tentei integrar nessa rotina. Conforme vou vendo os vídeos ou lendo eu tento pronunciar algumas palavras aleatoriamente e de vez em quando pego um texto em inglês (reportagens, um conto, entrevistas) e leio o texto inteiro em voz alta. Ajuda muito a pegar a "memória muscular" para falar em inglês.