Andrew Ng acaba de revelar por qué las empresas de IA que más esfuerzo de cálculo están destinadas al problema van a perder. El ganador de la carrera de inteligencia no usará más cálculo. Serán los que menos desperdician. Ng: "La mayoría de tus datos de alta dimensión se encuentran en un subespacio de dimensión inferior. Es simplemente un hecho de la vida." Esto es lo que eso significa en la práctica. Tienes un conjunto de datos de 10.000 dimensiones. Cada dimensión arrastrada por cada cálculo. Cada ciclo de entrenamiento transportando peso muerto que el modelo nunca usará. Ng: "Llevas estos ejemplos de 10.000 dimensiones durante todo tu proceso de entrenamiento." Ese exceso no es solo ineficiente. Es un impuesto sobre cada cálculo que ejecutas. Ancho de banda de memoria. Ancho de banda de red. Velocidad computacional. Todo ello devorado por dimensiones que no aportan nada a la inteligencia. Aportan ruido. La idea que separa a los arquitectos de la carrera armamentística: ese conjunto de datos de 10.000 dimensiones está casi totalmente capturado por un subespacio mucho más pequeño. ...