OpenAI v Londýne predstavilo aktualizácie svojho Realtime API, ktoré umožnia vývojárom integrovať hlasové funkcie do ich aplikácií s novými hlasmi a funkciami na generovanie promptov, čo uľahčuje vytváranie hlasových asistentov. Pre spotrebiteľov OpenAI spustilo vyhľadávanie cez ChatGPT, čím umožňuje internetové vyhľadávanie prostredníctvom chatbota. Tieto pokroky sú základom pre vývoj AI agentov, ktorí zvládnu zložité úlohy, ako je napríklad rezervácia letov. OpenAI má za cieľ vytvárať vlastných agentov a poskytnúť vývojárom svoj softvér na vytváranie ich vlastných agentov. Integrácia hlasu bude kľúčová na zlepšenie užívateľského zážitku s týmito agentmi, ktorí môžu fungovať ako osobní asistenti prístupom k e-mailom, aplikáciám a kalendárom. Avšak zostávajú dve významné výzvy: schopnosti racionálneho uvažovania a pripojenosť k nástrojom. OpenAI model o1 predstavuje funkciu "racionálneho uvažovania" pomocou posilňovaného učenia na zlepšenie vykonávania úloh, hoci stále potrebuje zlepšiť spoľahlivosť, rýchlosť a náklady. Kritici ako Chirag Shah varujú, že súčasná AI postráda skutočné uvažovanie a často imituje logické vzory z tréningových dát, skôr ako ich skutočne chápe.

Budúce ambície OpenAI zahŕňajú rozšírenie uvažovacích techník na rôzne oblasti mimo vedy a kódovania, ako sú právo a ekonomika. Druhá výzva sa týka potreby AI modelov efektívne sa prepojiť s externými nástrojmi pre úlohy v reálnom svete, idúc nad rámec spoľahnutia sa výhradne na tréningové dáta. Na riešenie tohto problému OpenAI vyhľadávanie cez ChatGPT umožňuje modelom prehľadávať web pre aktuálne informácie. Konkurent Anthropicov chatbot Claude ponúka funkciu, ktorá interaguje s počítačovými rozhraniami, čo poukazuje na potenciálnu funkčnosť AI agentov. Aj keď OpenAI o1 môže vykonávať niektoré interakcie s nástrojmi, je potrebný ďalší vývoj. Godemont predpovedá rast používania AI pre úlohy ako zákaznická podpora, ale uznáva nepredvídateľnosť toho, ako používatelia použijú technológie OpenAI, očakávajúc neočakávané aplikácie. Ďalej verzia hry Minecraft vyvinutá umelou inteligenciou od spoločností Decart a Etched demonštruje generovanie videa v reálnom čase prostredníctvom predpovede nasledujúcich snímok, dosiahnuté trénovaním AI modelu na rozsiahle dáta z hry Minecraft, hoci s výzvami, ako sú halucinácie. Existujú obavy, že AI hľadanie preformátuje web, možno ohrozí digitálnu ekonomiku zmenou dynamiky informácií. Poukazuje sa na úlohu AI v produkcii elektronického odpadu, s možným príspevkom až 5 miliónov ton do roku 2030 kvôli vybaveniu používanému v modeloch generatívnej AI. Navyše, neduhy AI sa odhalili v Poľsku, keď AI hostia neúmyselne "interviewovali" zosnulého laureáta Nobelovej ceny, čo viedlo k odporu. Nakoniec, generálny riaditeľ Meta Mark Zuckerberg očakáva nárast AI-generovaného alebo zhrnutého obsahu, predpokladajúc, že vytvorí vzrušujúcu novú kategóriu obsahu.