**De AGI-bubbel verliest stoom** *Afkoeling* Het aanstaande grote taalmodel van OpenAI, met de codenaam Orion, blijkt teleurstellend en toont minder vooruitgang dan GPT-4 deed ten opzichte van zijn voorganger, GPT-3. Volgens Bloomberg zijn sommige onderzoekers bij OpenAI van mening dat er geen verbeteringen zijn, met name op gebieden zoals coderen. Bovendien voldoet het nieuwe Gemini-model van Google niet aan de interne verwachtingen, en de planning voor de langverwachte Claude 3. 5 Opus van Anthropic blijft onzeker. Deze uitdagingen suggereren dat de huidige methode van het verbeteren van AI-modellen door middel van "schaalvergroting" zijn grenzen nadert. Het voortzetten van deze kostbare ontwikkelingen zonder significante prestatieverbeteringen kan economische moeilijkheden voorspellen als het doel is om kunstmatige algemene intelligentie te bereiken. Volgens Margaret Mitchell, hoofd ethicus bij AI-startup Hugging Face, "de AGI-bubbel barst een beetje, " wat aangeeft dat er mogelijk nieuwe trainingsbenaderingen nodig zijn om menselijke intelligentie en veelzijdigheid te bereiken. *Vraatzuchtige Technologie* De groeistrategie voor generatieve AI was voornamelijk schaalvergroting: de kracht van modellen vergroten door hun omvang uit te breiden, wat meer verwerkingskracht van bedrijven als Nvidia met zich meebrengt en gebruik maakt van enorme hoeveelheden webgeschraapte trainingsgegevens. Echter, naarmate modellen groeien, stijgt ook hun energie- en kostenbehoefte — Microsoft overweegt bijvoorbeeld om kerncentrales nieuw leven in te blazen om zijn AI-datacenters te ondersteunen.

Nu gratis trainingsdata schaars worden, wenden technologiebedrijven zich tot synthetische data, maar ondervinden nog steeds problemen bij het verkrijgen van unieke, hoogwaardige datasets zonder menselijke betrokkenheid, zoals Lila Tretikov, hoofd AI-strategie bij New Enterprise Associates, opmerkte. Om deze kosten te illustreren: Dario Amodei, CEO van Anthropic, vermeldde in een podcast, geciteerd door Bloomberg, dat de ontwikkeling van een geavanceerd AI-model momenteel ongeveer $100 miljoen kost, met voorspellingen dat dit tegen 2027 meer dan $10 miljard zal bedragen. *Beste Dagen Voorbij* Dit jaar heeft Anthropic zijn Claude-modellen bijgewerkt, Opus omzeild en alle verwijzingen naar een nabije toekomstuitgave van zijn website verwijderd. Volgens Bloomberg toonde Opus slechts lichte verbeteringen in verhouding tot zijn grootte en kosten. Evenzo heeft de Gemini-software van Google niet aan de verwachtingen voldaan en ontbreken grote doorbraken in hun grote taalmodel. Deze obstakels zijn niet onoverkomelijk, maar het lijkt onwaarschijnlijk dat de AI-industrie het snelle tempo van vooruitgang van het afgelopen decennium zal behouden. "We raakten heel enthousiast over een korte periode van zeer snelle vooruitgang, " vertelde Noah Giansiracusa, universitair hoofddocent wiskunde aan de Bentley University, aan Bloomberg. "Dat was gewoon niet houdbaar. " Meer over AI: Een AI-expert waarschuwt voor een dreigende crash nu verbeteringen in AI tegen een muur aanlopen.