Populární témata
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.
Andrew Ng právě odhalil, proč AI firmy, které věnují nejvíce výpočetního výkonu tomuto problému, přijdou o to.
Vítěz závodu o inteligenci nebude potřebovat nejvíce výpočetních schopností.
Budou plýtvat nejméně.
Ng: "Většina vašich vysokodimenzionálních dat leží v subprostoru s nižší dimenzí. To je prostě fakt života."
Toto to znamená v praxi.
Máte datovou sadu o velikosti 10 000 rozměrů.
Každý rozměr protáhl každým výpočtem.
Každý tréninkový cyklus tahání mrtvé zátěže model nikdy nevyužije.
Ng: "Nosíte tyto desetitisícirozměrné příklady po celý svůj tréninkový proces."
To nafouknutí není jen neefektivní.
Je to daň za každý výpočet, který provedete.
Šířka pásma paměti. Šířka pásma sítě. Výpočetní rychlost.
Všechno to je pohlceno dimenzemi, které k inteligenci nijak nepřispívají.
Přispívají hlukem.
Poznatek, který odlišuje architekty od závodu ve zbrojení: tato 10 000-dimenzionální datová sada je téměř zcela zachycena mnohem menším podprostorem.
...
Top
Hodnocení
Oblíbené
