Jag tror du har helt rätt och fel samtidigt. Du har rätt i att det bästa sättet att nå dit är att göra algoritmerna bättre. Men att en effektivare modell löser att vi inte behöver skala upp det lika mycket motsäger inte att det handlar om skala, snarare bekräftar det. Frågan är om de system vi har ens är på rätt väg, eller som skeptikerna tror att vi behöver ett helt nytt paradigm.
Så kan det vara, men såg en intervju med deep-minds VD där han fick frågan, och han sa att det vi känner till om hjärnan idag så är det inte så. Men sen kan vi ju långt ifrån allt om våra hjärnor.
Hmm, jag hade hört att den ska vara typ 1% av en mänsklig hjärna 
jag har hört att ryktet om 100 biljoner (eng trillion) inte ska stämma utan det handlar mer om 1 biljon (eng trillion). Orsaken ska vara att, enligt rykten, att flamingo i våras visade att det finns ett mycket mer effektivt sätt att träna AI. Snarare hur själva träningen fungerar, och att man behöver fler tokens för att det ska fungera bra.