Populární témata
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.

Dustin
Nadšenec do umělé inteligence: sledování globálních technologických trendů, pitvání myšlenek umělé inteligence, zkoumání transformačních dopadů, analýza etických změn, inovací a vizí budoucnosti.
Andrew Ng právě odhalil, proč AI firmy, které věnují nejvíce výpočetního výkonu tomuto problému, přijdou o to.
Vítěz závodu o inteligenci nebude potřebovat nejvíce výpočetních schopností.
Budou plýtvat nejméně.
Ng: "Většina vašich vysokodimenzionálních dat leží v subprostoru s nižší dimenzí. To je prostě fakt života."
Toto to znamená v praxi.
Máte datovou sadu o velikosti 10 000 rozměrů.
Každý rozměr protáhl každým výpočtem.
Každý tréninkový cyklus tahání mrtvé zátěže model nikdy nevyužije.
Ng: "Nosíte tyto desetitisícirozměrné příklady po celý svůj tréninkový proces."
To nafouknutí není jen neefektivní.
Je to daň za každý výpočet, který provedete.
Šířka pásma paměti. Šířka pásma sítě. Výpočetní rychlost.
Všechno to je pohlceno dimenzemi, které k inteligenci nijak nepřispívají.
Přispívají hlukem.
Poznatek, který odlišuje architekty od závodu ve zbrojení: tato 10 000-dimenzionální datová sada je téměř zcela zachycena mnohem menším podprostorem.
Signál zabírá jen zlomek prostoru, za který platíte za zpracování.
Stlač to. 10 000 rozměrů až na 1 000.
Ng: "Můžete spustit svůj učební algoritmus na mnohem méně dimenzionální sadě dat a může být mnohem efektivnější."
Stejný hardware. Stejný rozpočet. Zlomek tření.
Hrubá síla je strategie toho, kdo má nejhlubší kapsy.
Komprese je strategie toho, kdo skutečně rozumí problému.
Firmy, které to ovládnou, nevyrábějí jen rychlejší modely.
Budují modely, které nacházejí více pravdy v menším množství dat než cokoli, co by kdy bylo možné škálovat slepě.
Inteligence nikdy nebyla o zpracování všeho.
Jde o to vědět, co vyškrtnout.
3
Dr. Fei-Fei Li právě poukázal na největší slepou skvrnu v celém AI průmyslu.
Budujeme polovinu lidské inteligence. A nazývají to cílovou čárou.
Li: "Když se podíváte na lidskou inteligenci, v podstatě to shrnuje dvě kategorie."
První oblastí je jazyk. Symbolické uvažování. Komunikace. Schopnost myslet slovy a abstrakcemi.
To je to, na čem se poslední dekáda budovala každá velká AI laboratoř.
Druhý segment je ten, který průmysl téměř zcela ignoroval.
Li: "Tomu říkáme v AI prostorové inteligenci."
Jak lidé a zvířata vnímají, orientují se a interagují s trojrozměrným fyzickým světem. Jak saháme po předmětech. Jak se pohybujeme vesmírem. Jak budujeme a manipulujeme s fyzickou realitou.
Od malování mistrovských děl až po stavbu pyramid je to právě neverbální prostorová inteligence, která skutečně formuje svět.
Jazyk popisuje realitu. Prostorová inteligence na to působí.
A rozdíl mezi těmito dvěma věcmi je rozdíl mezi chatbotem a robotem.
Li: "Až bude tato technologie připravena, začne robotická revoluce. Už teď vidíme tento trend."
Každý robot je pohyblivý činitel. Každý pohybující se agent potřebuje prostorovou inteligenci, aby mohl fungovat v reálném světě.
Humanoidní roboti, kteří se právě nasazují ve fabrikách, dosahují stropu toho, co samy jazykové modely dokážou pohánět.
Prostorová inteligence je odemknutí.
Ale Li se nezastavil jen u robotiky.
Li: "Z geopolitického hlediska je to součást technologie, která jde přímo do zbraní."
Autonomní roje dronů. Navigace na bojišti. Fyzické získávání cíle bez lidského dohledu.
Každá vojenská aplikace AI, která funguje v reálném světě, funguje na základě prostorové inteligence.
Národ, který ovládne přechod od statického textu k dynamickému trojrozměrnému vnímání, nevyhrává jen závod o software.
Ovládá fyzické bojiště.
Závody ve zbrojení v AI právě vypukly z datového centra.
Teď funguje ve třech rozměrech.
47
Elon Musk právě řekl, že komunita AI nechápe matematiku superinteligence o dva řády velikosti.
Ani trochu ne. Není to směrově špatně.
Stokrát méně.
Musk: "Většina lidí v AI komunitě to zatím nechápe. Potenciál hustoty inteligence je mnohem větší, než co právě zažíváme."
Všichni se soustředí na závod o hardware. Větší datová centra. Více GPU. Jaderné elektrárny postavené pro zásobování výpočetního výkonu.
To je polovina rovnice.
Musk: "Myslím, že jsme o dva řády vedení, pokud jde o hustotu inteligence na gigabajt. To je jen algoritmické vylepšení. Stejný počítač."
Přečti si to pozorně. Ne další hardware. Ne víc energie. Ne více kapitálu.
Stejný stroj. Stokrát chytřejší. Pouze softwarem.
To je ještě předtím, než se k tomu přidají hardwarová vylepšení.
Musk: "A počítače se zlepšují. Proto si myslím, že je to něco, co se zlepšuje 10x ročně. Tisíc procent."
Tisíciprocentní složený roční růst surové inteligence.
Systém, který se každých dvanáct měsíců stane desetkrát schopnějším, nesleduje lineární křivku. Nesleduje exponenciální křivku, kterou by lidská intuice dokázala sledovat.
Sleduje křivku, kterou lidská intuice vůbec nedokáže simulovat.
V prvním roce je to 10x chytřejší. Ve druhém roce je to stokrát. Ve třetím roce je to tisíckrát.
V tu chvíli je mezera mezi tímto systémem a lidským mozkem větší než mezera mezi lidským mozkem a kalkulačkou.
To je matematika, kterou veřejnost nepočítá.
Modely se nejen zlepšují. Hromadí se samy sebe tempem, které způsobuje, že všechny předchozí technologické křivky vypadají plochě.
Musk: "Potenciál hustoty inteligence je mnohem větší, než co právě zažíváme."
Neblížíme se k superinteligenci v časové ose, jakou si většina lidí představuje.
Už jsme uvnitř křivky.
59
Top
Hodnocení
Oblíbené
