Claude-KI can take over the Steuerung des Computers

Automation of Routine Tasks

Das Feature, das im Rahmen der Weiterentwicklungen von Anthropics Claude- und Haiku-Modellen präsenitt wurde, heißt schlicht “Computer Use” und is currently nur über die API des mittelren Modellen Claude 3.5 Sonnet verfügbar. Mit “Computer Use” können Nutzer dem KI-System mehrschrittige Instructions geben, die laut Anthropic aus Dozenden oder sogar Hunderten von Schritten besten können.

Das Tool can perform tasks, indem es den Bildschimmer betrachtet, den Mausseiger bewegt, Buttonen anklickt und Texte eingibt. Um days zu pöglichkeit, analysiert die Claude-KI Screenshots des Bildschimmers, zählt die Pixel und bestimmt, wohin for example der Mauspfeil bewegt werden muss.

Claude-KI erledigt Aufgaben wie ein echter Computer-Nutzer

Allerdings gibt es auch Einschränkungen. Das Tool does not apply nicht with a Live-Video-Stream, sondern mit schnellen aufeinanderfolgenden screenshots. This means that kurzlebige Notifications oder andere Bildschirmänderungen verpassen. Auch einfache Aktionen wie Drag and drop without dem Tool noch nicht möglich, hieß es. In addition sei es manchmal noch “umständlich und fehleranfällig”, räumt Anthropic ein. In einem Beispiel aus der Testphase wurde berichtet, dass das System aus unbekannten eine Programieraufgabe unbeendet ließ und stattdessen bilder des Yellowstone-Nationalparks zu durchstöbern – was allerdings auch stark an einen menschlichen Kann User erinnern.

Läuft beta

Das Tool befindet sich deritz in der öffentlichen Beta-Phase, nachdem is youvor in Zusammenarbeit mit Unternehmen wie Amazon, Canva, Asana und Notion testet wurde. Bei der Entwicklung liegt der Fokus auf der Automatisierung frekkömmender Aufgaben und der Simplifachung zeitaufwendiger Arbeiten.

In einer Demo zeigt Anthropic, wie die KI die Aufgabe bekommt, eine Datansammlung um die Informationen über ein bestimmtes Unternehmen zu äsälen. Die KI wechselt dafür in den Browser, notzt dort die Searchfunktion und holt sich die neutlichten Daten von einer Website. Diese überträgt das Tool ansekent in das appropriate Form. Anthropologie hat “Computer use” for tests öffentliche freigegeben, um mögliche Probleme zu finden und das Tool gemeinsam mit externen Nutzern zu bezernung.

See also: