1 · Fundamentos de ANN
Del perceptrón único a la retropropagación y la barrera del gradiente desvanecido — la maquinaria base que usa toda red profunda.
ANNs, CNNs, RNNs, LSTMs, Transformers — animados de principio a fin.
Del perceptrón a multi-head attention. El código de PyTorch/TensorFlow es read-along (no corren en Pyodide), pero cada idea clave — backprop, stride de convolución, mapas de atención, bloques transformer — recibe una escena cinemática que hace que las matemáticas encajen.
Del perceptrón único a la retropropagación y la barrera del gradiente desvanecido — la maquinaria base que usa toda red profunda.
De sigmoide a GELU, de MSE a cross-entropy, de SGD a Adam — los tres mandos que ajustas para que una red profunda entrene.
Inicialización de pesos, dropout, batch norm — más dos proyectos completos: clasificador binario ANN y regresor ANN, hechos a mano en numpy con read-alongs de PyTorch.
De la operación de convolución a un clasificador de imágenes completo — la arquitectura que dominó la visión computacional por una década.
Desde la intuición de RNN, pasando por BPTT y el problema del gradiente desvanecido, hasta un clasificador de sentimientos end-to-end.
Arquitecturas recurrentes con gates que resolvieron el problema del gradiente desvanecido y dominaron NLP de 2014 a 2017.
Encoder-decoder, el problema del cuello de botella, atención como lookup suave y self-attention — el puente de RNNs a Transformers.
Atención multi-cabeza, codificación posicional, el bloque encoder/decoder y un mini-GPT desde cero — la arquitectura detrás de todo LLM moderno.
Tokenización subword, preentrenamiento auto-supervisado, las tres familias de arquitecturas, transfer learning, LoRA e instruction-tuning + RLHF — cómo se construyen, adaptan y alinean los LLMs reales.
Autoencoders, VAEs, GANs, difusión (DDPM), difusión latente/condicional (Stable Diffusion) y cómo se comparan las familias generativas — el lado creativo del deep learning.