Ný rannsókn frá Microsoft vísindamönnum og háskólafélögum bendir til þess að gervigreindaragentar (AI) knúnir stórum tungumálalíkönum (LLMs) séu að þróast til að stjórna myndrænum notendaviðmótum (GUIs), sem gæti breytt samskiptum manna og hugbúnaðar. Þessar AI-kerfi geta nú framkvæmt verkefni eins og að smella á takka og sigla um forrit með því að túlka náttúrulegt mál til að framkvæma skipanir. Þessir "GUI agentar" eru lýstir sem mikilli samþættu breytingu og leyfa notendum að ljúka flóknum verkefnum í gegnum einfalda samræðu, breyta notendaupplifun á vef- og farsímaforritum auk skjáborðs sjálfvirkni. Stór tækniþyrping fyrirtækja eru að fella þessar aðgerðir inn í sínar vörur. Til dæmis hjálpa Power Automate og Copilot AI frá Microsoft við að sjálfvæða verkferla og hugbúnaðarstýringu, á meðan Claude frá Anthropic bætir viðmóti á vefnum. Google vinnur samkvæmt fréttum að Project Jarvis, sem notar Chrome til verka á vefnum. Við aukningu LLMs, sérstaklega fjölhæfra þeirra, markast ný stig í sjálfvirkni GUIs, með mikla markaðsvöxt mögulega úr $8. 3 milljörðum árið 2022 í $68. 9 milljarða árið 2028, samkvæmt BCC Research.

Þessi vöxtur endurspeglar áform fyrirtækja um að gera hugbúnað aðgengilegri og draga úr endurteknum verkum. Þó eru til staðar áskoranir eins og áhyggjur um persónuvernd, frammistöðuvandamál og öryggi sem þarf að leysa áður en víðtæk notkun verður möguleg. Eldri sjálfvirkniaðferðir höfðu ekki næga sveigjanleika fyrir raunverulegar aðstæður. Lausnir fela í sér þróun skilvirkra staðbundinna líkön, aukin öryggi og stöðlun á mati. Sérfræðingar sjá fyrir sér breytingu í átt að margmiðlunar kerfum og fjölhæfir eiginleikar í GUI sjálfvirkni, sem gætu stórlega aukið framleiðni en kallað á varfærni vegna öryggis- og innviðaáhrifa. Sérfræðingar í greininni sjá fyrir sér almenna notkun á GUI sjálfvirkniagentum innan fyrirtækja fyrir árið 2025, með mögulegum hagkvæmniárangri og áskorunum vegna gagnaverndar og áhrif á störf. Rannsóknin undirstrikar mikilvægt augnablik fyrir samtals AI viðmót til að endurskilgreina hugbúnaðar samskipti, með fyrirvara um tæknilega þróun og framkvæmdaframfarir í fyrirtækjum. Vísindamenn sjá fyrir sér að AI aðstoðarmenn verði ómissandi í vinnu okkar við tölvur, með því að meðhöndla flókin og kvik umhverfi á skilvirkan hátt.