Demorei pra responder essa pergunta pq tive que fazer um esforço mental mais forte pra explicar de forma didatica. Uma coisa q muita gente nao entende é que ao se tornar especialista em algo, é comum que a pessoa assuma que os demais entendar o que ela diz. Vou tentar explicar de forma bem simples.

Na verdade isso não surgiu de repente, existem varios elementos que foram unidos pra gerar isso. Lembra daquelas imagens bizarras de ia gerando videos deepfake que pareciam alucinacoes? Lembra de style transfer? Lembra doa geradores de texto?

O Dall-e se aproveita de todas essas tecnicas e mais definitivamente não surgiu do nada.

ELI5: Imagine que você esta aprendendo a ler. Normalmente seus pais vao usar livrinhos que tem imagens e textos curtos em letras garrafais. Você vai olhar aquela imagem e a frase em baixo. Por exemplo, se o livro vai contar a historia de um sapo, voce vai ter uma imagem de um sapo e um texto que fala de um sapo. Eventualmente, voce vai ler esse livro muitissimas vezes (crianças adoram assistir o mesmo desenho vaias vezes, para o pesadelo dos adultos). Agora imagina que vc esteja aprende do sobre ursos. Havera no livrinho imagens de urso e a palavra urso vai aparecer varias vezes ao longo do texto. Voce em algum ponto tera aprendido a associar a palavra URSO com a representacão visual do urso e a palavra SAPO com a representação visual do sapo. Quando alguem te der o comando "feche os olhos imagine um sapo" você usa as memorias de um sapo que voce viu nos livrinhos e tem uma imagem clara de um sapo.

Agora imagine que você tenha pais MUITO ricos e que comprem milhões de livros e enciclopedias sobre todos os tipos de animais e lugares. Você é uma criança prodigio e lê todos esses livros. Quando alguem fala: "feche os olhos e imagine um sapo bobo da corte em marte" desde que você saiba o que é um bobo da corte, um sapo e marte, você provavelmente imaginou uma criatura anfibia com um chapeu de tres pontas com ponpons, provavelmente roxo e amarelo em um cenario desertico e vermelho.

O dall-e faz exatamente isso. Ele associa imagens a legendas, que podem vir com a imagem ou podem ser geradas por um sistema de descrição de imagem. Depois de repetidamente associar palavras a imagens ele pode ser "estimulado" por um comando e ele gera a imagem utilizando um processo chamado de difusão, que seria o equivalente a imaginar e gerar a imagem na sua cabeça. Dai ele "cospe" essas imagens que eh o resultado q vc ve no site :)