Le calcul brut devient une marchandise. L'expertise humaine profonde devient le véritable rempart. Sebastian Bubeck d'OpenAI vient de briser l'illusion selon laquelle l'IA égaliserait les capacités humaines. Ce ne sera pas le cas. À mesure que les modèles approchent de l'AGI, la barrière à l'entrée pour les tâches de base tombe à zéro. Mais le plafond de ce qui est possible monte à l'infini. Si vous savez vraiment ce que vous faites. Bubeck : « Je pense que l'expertise et l'expertise approfondie dans un domaine scientifique sont plus importantes que jamais. » C'est la partie que la plupart des gens ne traitent pas. Si vous n'avez pas une compréhension fondamentale de la physique, des mathématiques ou de l'ingénierie avec lesquelles vous travaillez, vous ne pouvez pas pousser le modèle au-delà de sa surface. Vous vous retrouvez piégé dans une boucle. Taper des invites. Obtenir des réponses. Ne rien comprendre. Ne rien construire. Bubeck : « La crainte serait qu'il y ait encore plus de séparation entre les personnes qui commencent à trop compter sur l'IA… et les personnes qui étudient vraiment précisément ce qui se passe. » La fracture est déjà en train de se former. Et ce n'est pas celle que quiconque avait prédite. L'économie future ne sera pas divisée entre ceux qui ont l'IA et ceux qui ne l'ont pas. Tout le monde aura l'IA. Elle sera divisée entre les personnes qui comprennent le problème suffisamment en profondeur pour diriger le système, et les personnes qui se contentent de consommer ce qu'il produit. Un groupe construit avec. L'autre est remplacé par elle. Le système hérité récompensait la mémorisation et les diplômes. L'ère de l'IA récompense une compréhension si précise que vous pouvez dire à la machine exactement où elle se trompe. Ce type de connaissance ne vient pas de l'invite. Il vient d'années d'études approfondies que la plupart des gens sautent actuellement parce que la machine donne l'impression que c'est inutile. C'est le piège. La machine est le moteur. Mais vous devez comprendre le terrain.

Andrew Ng vient de révéler pourquoi les entreprises d'IA qui investissent le plus de puissance de calcul dans le problème vont perdre. Le gagnant de la course à l'intelligence n'utilisera pas le plus de puissance de calcul. Ils gaspilleront le moins. Ng : « La plupart de vos données à haute dimension se trouvent sur un sous-espace de dimension inférieure. C'est juste un fait de la vie. » Voici ce que cela signifie en pratique. Vous avez un ensemble de données de 10 000 dimensions. Chaque dimension traînée à travers chaque calcul. Chaque cycle d'entraînement traînant un poids mort que le modèle n'utilisera jamais. Ng : « Vous transportez ces exemples de 10 000 dimensions tout au long de votre processus d'entraînement. » Cette surcharge n'est pas seulement inefficace. C'est une taxe sur chaque calcul que vous effectuez. Bande passante mémoire. Bande passante réseau. Vitesse de calcul. Tout cela est consommé par des dimensions qui n'apportent rien à l'intelligence. Elles contribuent au bruit. L'idée qui sépare les architectes de la course aux armements : cet ensemble de données de 10 000 dimensions est presque entièrement capturé par un sous-espace beaucoup plus petit. Le signal vit dans une fraction de l'espace que vous payez pour traiter. Compressez-le. 10 000 dimensions réduites à 1 000. Ng : « Vous pouvez exécuter votre algorithme d'apprentissage sur un ensemble de données de dimension beaucoup plus faible et cela peut être beaucoup plus efficace. » Même matériel. Même budget. Une fraction de la friction. La force brute est la stratégie de celui qui a les poches les plus profondes. La compression est la stratégie de celui qui comprend réellement le problème. Les entreprises qui maîtrisent cela ne construisent pas seulement des modèles plus rapides. Elles construisent des modèles qui trouvent plus de vérité avec moins de données que tout ce qui évolue aveuglément ne le fera jamais. L'intelligence n'a jamais été une question de traitement de tout. Il s'agit de savoir quoi couper.

Le Dr Fei-Fei Li vient de mettre en lumière le plus grand angle mort de l'ensemble de l'industrie de l'IA. Nous avons construit la moitié de l'intelligence humaine. Et l'avons appelée la ligne d'arrivée. Li : « Si vous regardez l'intelligence humaine, cela se résume à deux catégories. » La première catégorie est le langage. Le raisonnement symbolique. La communication. La capacité de penser en mots et en abstractions. C'est ce sur quoi chaque grand laboratoire d'IA a passé la dernière décennie à travailler. La deuxième catégorie est celle que l'industrie a presque entièrement ignorée. Li : « Nous l'appelons en IA l'intelligence spatiale. » Comment les humains et les animaux perçoivent, naviguent et interagissent avec le monde physique tridimensionnel. Comment nous atteignons des objets. Comment nous nous déplaçons dans l'espace. Comment nous construisons et manipulons la réalité physique. De la peinture de chefs-d'œuvre à la construction des pyramides, l'intelligence spatiale non verbale est ce qui façonne réellement le monde. Le langage décrit la réalité. L'intelligence spatiale agit sur elle. Et l'écart entre ces deux choses est l'écart entre un chatbot et un robot. Li : « Quand cette technologie sera prête, la révolution robotique va commencer. Nous voyons déjà cette tendance. » Chaque robot est un agent en mouvement. Chaque agent en mouvement nécessite une intelligence spatiale pour fonctionner dans le monde réel. Les robots humanoïdes déployés dans les usines en ce moment atteignent le plafond de ce que les modèles de langage seuls peuvent alimenter. L'intelligence spatiale est la clé. Mais Li ne s'est pas arrêté à la robotique. Li : « D'un point de vue géopolitique, c'est une partie de la technologie qui va directement dans les armes. » Des essaims de drones autonomes. Navigation sur le champ de bataille. Acquisition de cibles physiques sans supervision humaine. Chaque application militaire de l'IA qui opère dans le monde réel repose sur l'intelligence spatiale. La nation qui maîtrise la transition du texte statique à la perception tridimensionnelle dynamique ne gagne pas seulement la course au logiciel. Elle commande le champ de bataille physique. La course aux armements en IA vient de sortir du centre de données. Elle opère maintenant en trois dimensions.