ElemedexEnciclopedia de bolsillo de arquitecturas de IA
N.º 018

AlexNet

SuperVision (its ILSVRC 2012 entry)

Visión profunda

Nació en el dormitorio de un estudiante de Toronto, sobre dos placas de video hechas para jugar. Aprendió a ver con un millón de fotos que miles de personas invisibles habían etiquetado por centavos. Cuando apareció en 2012, la visión por computadora cambió de especie casi de un día para el otro.

Altura
8 (5 conv + 3 densas)
Peso
≈ 240 MB (fp32)
Parámetros
≈ 60 M
Contexto
1 imagen 224 × 224 × 3
Datos de entrenamiento
ImageNet ILSVRC-2012: ≈ 1,2 M imágenes · 1000 clases
Año
2012
Generación
3 · Aprendizaje profundo
Creadores
Krizhevsky, Sutskever & Hinton (University of Toronto)
Clase
Modelo

Estadísticas base

Total
168

Escalas ordinales y aproximadas, pensadas para comparar especies entre sí; los números duros están en la ficha.

Debilidades

  • Ejemplos adversariales: cambios invisibles en los píxeles le hacen ver un avestruz en un colectivo escolar.
  • Necesita más de un millón de imágenes etiquetadas a mano.
  • Asigna una sola etiqueta por foto: no describe escenas ni relaciones entre objetos.
  • Como modelo de la visión humana cubre, a lo sumo, los primeros cien milisegundos.

Hábitat

Creció en el subconjunto de ImageNet del concurso ILSVRC: 1,2 millones de fotos de Flickr y buscadores, filtradas por trabajadores de Mechanical Turk. Hoy vive en los cursos de introducción, en el museo (su código original fue publicado en 2025) y en los genes de casi todas las redes de visión que vinieron después.

Movimientos

Habilidades

Rectificación (ReLU)
La activación max(0, x) no se satura: con ella la red entrenaba varias veces más rápido que con tanh.
Dropout
En las dos primeras capas densas, cada neurona se apaga al azar con probabilidad 0,5 durante el entrenamiento, lo que frena el sobreajuste.
Cerebro partido
La red no cabía en una sola GPU de 3 GB: se repartió en dos tarjetas que solo se comunican en algunas capas.

Anatomía

AlexNet: cinco capas convolucionales y tres densas. Cada convolución y cada capa densa va seguida de una ReLU. En el original, casi todas las capas están partidas en dos mitades, una por GPU, que solo intercambian información en la tercera capa convolucional y en las densas.

Cadena evolutiva

018 AlexNet
  • redes convolucionales de política y valor, búsqueda en árbol y autojuego024 AlphaGo

AlexNet es una red convolucional de ocho capas que clasifica fotografías en mil categorías. Su victoria en el concurso ImageNet de 2012 suele tomarse como el comienzo del auge del aprendizaje profundo (Buckner, 2024, p. 55; Chollet, 2021, sec. 1.2.5). Casi no inventó nada: juntó por primera vez, a la escala adecuada, ideas que esperaban desde hacía dos décadas.

Cómo funciona

La red recibe una imagen de 224 × 224 píxeles con tres canales de color y la procesa con cinco capas convolucionales y tres capas densas: unos 60 millones de parámetros y 650.000 neuronas (Krizhevsky et al., 2012). Cada capa convolucional desliza sobre la imagen un banco de filtros pequeños (96 de 11 × 11 píxeles en la primera) que responden a bordes, orientaciones o manchas de color; una rectificación deja pasar solo lo detectado y el pooling resume cada vecindario con su valor máximo. Buckner (2024) llama a esta secuencia un «abstraction sandwich», apilado una y otra vez (2024, p. 127). Dos capas densas de 4096 unidades combinan los rasgos y una softmax reparte la probabilidad entre las mil clases.

Los autores destacan varios recursos (Krizhevsky et al., 2012, secs. 3–4):

  • ReLU: la función de activación max(0, x), con la que la red entrenaba varias veces más rápido que con tanh.
  • Dos GPU: la red no cabía en los 3 GB de una GTX 580, así que se repartió en dos tarjetas que solo se comunican en algunas capas.
  • Aumento de datos: recortes y reflejos aleatorios multiplican las imágenes de entrenamiento.
  • Dropout: en las dos primeras capas densas cada neurona se apaga con probabilidad 0,5 en cada paso; sin esto, la red se sobreajustaba de manera notable. Equivale a entrenar a la vez un conjunto exponencial de subredes que comparten pesos (Witten et al., 2017, p. 436).

El entrenamiento llevó entre cinco y seis días (Krizhevsky et al., 2012, sec. 5).

Qué cambió

Las piezas eran viejas: la convolución y la retropropagación se entendían bien hacia 1990 (Chollet, 2021, sec. 1.3), y Red convolucional (LeNet) ya leía dígitos manuscritos. Lo nuevo fue la escala. En 2010 y 2011, los ganadores de ImageNet, basados en máquinas de vectores de soporte y rasgos diseñados a mano, acertaban el 72 % y el 74 % con cinco intentos (M. Mitchell, 2019, ch. 5). AlexNet bajó el error top-5 a 15,3 %, contra 26,2 % del segundo puesto (Krizhevsky et al., 2012); los métodos no convolucionales parecían estancados en torno al 25 % (Witten et al., 2017, p. 439). No fue la primera red entrenada en GPU que ganaba concursos (Dan Cireşan lo hacía desde 2011), pero sí la que convenció al campo (Chollet, 2021, sec. 1.2.5).

El cambio de fondo es que los rasgos dejaron de diseñarse a mano: la red los aprende junto con el clasificador (Chollet, 2021, sec. 1.2.6). Los filtros de su primera capa resultaron selectivos a orientaciones y frecuencias (Krizhevsky et al., 2012, sec. 6.1), como las células «simples» de la corteza visual del gato descritas por Hubel y Wiesel (1962), cuyo hallazgo inspiró todo el linaje convolucional (Buckner, 2024, pp. 122–124).

Todo estaba hecho para otra cosa

Las GPU se diseñaron para videojuegos: el mercado del gaming, dice Chollet, subsidió la supercomputación de la IA (2021, sec. 1.3.1). Las etiquetas de ImageNet se obtuvieron con Amazon Mechanical Turk, un sistema creado para depurar fichas de productos duplicadas; unas 49.000 personas de 167 países trabajaron en ellas entre 2007 y 2010 (Mollick, 2026). El nombre alude a un autómata ajedrecista con un humano escondido. Poco después, Google compró la pequeña empresa de Hinton, Krizhevsky y Sutskever en una subasta que se detuvo en 44 millones de dólares (Mollick, 2026).

Límites

Un año más tarde, Szegedy y colegas mostraron que cambios imperceptibles en los píxeles hacían que AlexNet viera un avestruz donde había un colectivo escolar, y que la fragilidad afectaba también a otras redes (M. Mitchell, 2019, ch. 6). Como modelo de la visión, una red así cubre a lo sumo los primeros cien milisegundos de la percepción, sin recurrencia ni control descendente (Buckner, 2024, p. 124). Y su diseño envejeció rápido: la normalización local se abandonó y los sucesores ganaron con más profundidad, de VGG (19 capas, 7,3 %) a ResNet (152 capas, 3,6 %) (Witten et al., 2017, p. 439; He et al., 2016). Incluso la cifra de «5 % de error humano» con que se las comparaba proviene de una sola persona, Andrej Karpathy, que se entrenó con 500 imágenes (M. Mitchell, 2019, ch. 5).

Fuentes

  • Buckner, C. J. (2024). From deep learning to rational machines: What the history of philosophy can teach us about the future of artificial intelligence. Oxford University Press. https://doi.org/10.1093/oso/9780197653302.001.0001 §
  • Chollet, F. (2021). Deep learning with Python (2nd ed.). Manning Publications. §
  • Deng, J., Dong, W., Socher, R., Li, L.-J., Li, K., & Fei-Fei, L. (2009). ImageNet: A large-scale hierarchical image database. In 2009 IEEE Conference on Computer Vision and Pattern Recognition (pp. 248–255). IEEE. https://doi.org/10.1109/CVPR.2009.5206848 §
  • Gray, M. L., & Suri, S. (2019). Ghost work: How to stop Silicon Valley from building a new global underclass. Houghton Mifflin Harcourt. §
  • He, K., Zhang, X., Ren, S., & Sun, J. (2016). Deep residual learning for image recognition. In Proceedings of the 2016 IEEE Conference on Computer Vision and Pattern Recognition (CVPR) (pp. 770–778). IEEE. https://doi.org/10.1109/CVPR.2016.90 §
  • Hubel, D. H., & Wiesel, T. N. (1962). Receptive fields, binocular interaction and functional architecture in the cat’s visual cortex. The Journal of Physiology, 160(1), 106–154. https://doi.org/10.1113/jphysiol.1962.sp006837 §
  • Krizhevsky, A., Sutskever, I., & Hinton, G. E. (2012). ImageNet classification with deep convolutional neural networks. In Advances in Neural Information Processing Systems (Vol. 25). Curran Associates. https://proceedings.neurips.cc/paper_files/paper/2012/hash/c399862d3b9d6b76c8436e924a68c45b-Abstract.html §
  • Mitchell, M. (2019). Artificial intelligence: A guide for thinking humans. Pelican Books. §
  • Mollick, E. (2026). Built for something else: Sources and notes [Sources companion to the video "Built for something else: How a chain of accidents built ChatGPT"; written by Claude Opus 5.5, supervised by E. Mollick]. Retrieved September 30, 2026, from https://built-for-something-else.netlify.app/ §
  • Srivastava, N., Hinton, G., Krizhevsky, A., Sutskever, I., & Salakhutdinov, R. (2014). Dropout: A simple way to prevent neural networks from overfitting. Journal of Machine Learning Research, 15(56), 1929–1958. https://jmlr.org/papers/v15/srivastava14a.html §
  • Witten, I. H., Frank, E., Hall, M. A., & Pal, C. J. (2017). Data mining: Practical machine learning tools and techniques (4th ed.). Morgan Kaufmann. https://doi.org/10.1016/C2015-0-02071-8 §