Am Donnerstag stellte OpenAI eine Forschungsansicht von „Operator“ vor, einem Webautomatisierungstool, das durch ein neues KI-Modell namens Computer-Using Agent (CUA) betrieben wird. Dieses Tool ermöglicht es Nutzern, Computer über eine visuelle Schnittstelle zu steuern, indem sie Aufgaben durch die Interaktion mit Elemente auf dem Bildschirm wie Tasten und Textfeldern ausführen, ähnlich wie es Menschen tun. Derzeit ist Operator für Abonnenten des monatlichen ChatGPT Pro-Plans für 200 US-Dollar unter operator. chatgpt. com zugänglich, mit Plänen, den Zugang in Zukunft auf Plus-, Team- und Enterprise-Nutzer auszuweiten. OpenAI zielt darauf ab, diese Funktionen in ChatGPT zu integrieren und den CUA über eine API für Entwickler bereitzustellen. Operator überwacht den Bildschirminhalt in Echtzeit und führt Befehle durch simulierte Tastatur- und Mausaktionen aus. Es analysiert Screenshots, um den Zustand des Computers zu verstehen, was es ihm ermöglicht, Entscheidungen über Klicks, Eingaben und Scrollbewegungen entsprechend zu treffen. Diese Veröffentlichung steht im Einklang mit einem Trend bei Tech-Unternehmen, die „agentische“ KI-Systeme erforschen, die im Namen des Nutzers agieren können. Google führte im Dezember 2024 das Projekt Mariner für automatisierte Webaufgaben ein, während Anthropic im Oktober 2024 ein Tool namens „Computer Use“ zu ähnlichen Zwecken startete. Simon Willison, ein KI-Forscher, stellte fest, dass die Operator-Oberfläche der Demo von Anthropic’s Claude Computer Use ähnelt, da sie ein Chat-Panel neben einer interaktiven visuellen Schnittstelle bietet. Der CUA funktioniert, indem er Screenshots aufnimmt, diese analysiert, um Pixel-Daten mit den Vision-Fähigkeiten von GPT-4o zu bewerten, dann notwendige Aktionen entscheidet und virtuelle Eingaben ausführt. Dieser Rückkopplungsprozess ermöglicht es ihm, Fehler zu korrigieren und komplexe Aufgaben über verschiedene Anwendungen hinweg zu verwalten.

Während der Nutzung zeigt ein Mini-Browserfenster die Aktionen von Operator an. Trotz seiner Fähigkeiten entwickelt sich die Technologie weiter und hat Einschränkungen, da sie bei sich wiederholenden Webaufgaben gut abschneidet, jedoch Schwierigkeiten mit unbekannten Schnittstellen und komplexen Texteingaben hat – interne Tests berichteten lediglich von einer Erfolgsquote von 40 Prozent. Operator erreichte eine Erfolgsquote von 87 Prozent im WebVoyager-Benchmark, fiel jedoch auf 58, 1 Prozent im WebArena-Benchmark für Offline-Trainingsseiten. Seine Leistung im OSWorld-Benchmark betrug 38, 1 Prozent. OpenAI sucht dasFeedback der Nutzer, um die Funktionalität des Systems zu verbessern, wobei das Unternehmen versteht, dass CUA nicht in allen Szenarien zuverlässig sein wird und plant, seine Vielseitigkeit im Laufe der Zeit zu verbessern. Datenschutz und Sicherheit sind wichtige Bedenken, da Operator die Aktivitäten der Nutzer beobachten und steuern kann. OpenAI hat Sicherheitsmaßnahmen implementiert, die eine Bestätigung durch den Nutzer für sensible Aktionen erfordern, und es wurden Browsing-Beschränkungen festgelegt, um den Zugang zu bestimmten Kategorien von Websites wie Glücksspiel und Erwachsenen-Inhalten zu verhindern. OpenAI integriert auch eine Echtzeitmoderation, um Subversionsversuche zu verhindern, obwohl Willison Skepsis bezüglich der langfristigen Sicherheit aufgrund potenzieller neuer Bedrohungen äußerte. Trotz proaktiver Maßnahmen gibt OpenAI in seiner Dokumentation zu, dass weiterhin Herausforderungen aufgrund von Modellierungskomplexitäten und sich entwickelnden Bedrohungen bestehen. Datenschutzbedenken ergeben sich aus der Tatsache, dass Operator Screenshots an die Cloud-Server von OpenAI sendet; die Nutzer werden ermutigt, den Datenschutzmaßnahmen des Unternehmens zu vertrauen, die es ermöglichen, bei der Modellentwicklung Daten abzulehnen, Daten auf einen Klick zu löschen und Sitzungen für sensible Aufgaben zu verwalten. Willison riet den Nutzern, für separate Aufgaben frische Sitzungen zu starten, um ihre Anmeldeinformationen zu schützen, und forderte zur Vorsicht auf, wenn es darum geht, Zahlungsinformationen anzugeben, und empfahl, nach solchen Aktionen schnell aufzuräumen.