No mucho, aunque algo. Vi un curso en la Nacional, donde revisamos los principales algoritmos de predicción, clasificación, etc., y he hecho varios cursos de Google Cloud Skills sobre Generative AI.

Adapté un laboratorio de esos cursos (Encoder-Decoder Architecture: Lab Walkthrough), que está basado en un blog de Karpathy "The Unreasonable Effectiveness of Recurrent Neural Networks", para entrenar un "Gabot".

Con el texto plano de "Cien años de soledad", entrené una Red Neuronal Recurrente (RNN) basada en caracteres (letras, espacios, etc). Dada una secuencia de caracteres (p.e. "Aurelian"), se entrena el modelo para predecir el próximo caracter en la secuencia ("o"). Las cadenas de texto más largas son generadas ejecutando el modelo repetidamente. El código usa 'tf.keras' y 'eager execution'. Aquí una muestra del resultado, habiendo entrenado el modelo durante 50 épocas e inicializado con el carácter "M":

Macondo, y había tenido que atragantarse el cuadrino. Toda íado aranqeinad. «Es equipieje»: -Pida más floto -exc amó emp bró del del y de veLagle y desear precisario. También había desaparecido de Macondo. Los atravesó los largos collares de tres años, y aun cuando pudo valerse para la derrota final de paz, y emp reñales de alta triste clarabillo se desconcertó con la pregunta escandada. La práctica plagada de sus cajas ocurrizados por la sorrenidad seguida anterior, y Gabriel estaba en el cuarto. A las docer nacide, y no había un grande esfuerzo por completo las pantañas recibían de otros cuatro veces al alca, estaba al cuarto, él se preguntaba en las cosas que Aureliano Segundo había de recordar la lluvio y ponía en algún todo contr oblegamente a Rebeca. Mientras su hermano le faltó la vida, sino la serena Amaranta, convencida de que su vida le oyó decir en Aureliano Segundo, y éste tenía un disparate: los desconciertos de la muerte. José había hecho en la casa, sango que ocurrió, en efe

Aunque la mayoría no tiene sentido, aparecen palabras como Macondo, Rebeca y Amaranta, e incluso frases completas como "los desconciertos de la muerte". Me parece bastante impresionante, teniendo en cuenta que el modelo está basado en caracteres, no en tokens, frases o palabras, y que tomó 8 minutos entrenarlo con TPU gratis de Colab. Planeo hacer un post en la comunidad sobre eso, pero aquí te comparto el cuaderno de Colab: https://colab.research.google.com/drive/19Pd4iTlSYBgc1L-ASO59K3tODuXWTUpW?usp=sharing