GitHub Copilot Computer Use: KI steuert Apps auf Mac und Windows
Veröffentlicht am: 02.10.2026 um 09:54 Uhr | Redaktion boerse-global.de
GitHub hat eine öffentliche Vorschauversion der Funktion „Computer Use“ für die Copilot-Befehlszeile (CLI) sowie die Copilot-App auf den Betriebssystemen macOS und Windows bereitgestellt. Wie aus einem Bericht vom Anfang Oktober hervorgeht, erweitert das Unternehmen damit die Fähigkeiten seines KI-Assistenten um die direkte Interaktion mit Desktop-Oberflächen.
Erweiterte Interaktion mit Desktop-Anwendungen
Die neue Funktion ermöglicht es dem Copilot, Bildschirminhalte zu lesen, Klicks auszuführen, Texte zu tippen und zu scrollen. Damit kann die Künstliche Intelligenz komplexe, anwendungsübergreifende Arbeitsabläufe übernehmen.
Ein wesentlicher Aspekt dieser Entwicklung ist die Kompatibilität mit Software, die über keine eigenen Programmierschnittstellen (API), Befehlszeilenzugänge oder das Model Context Protocol (MCP) verfügt. Die KI agiert stattdessen direkt auf der grafischen Benutzeroberfläche, wie sie auch einem menschlichen Nutzer erscheint.
Für die Nutzung unter macOS sind spezifische Systemberechtigungen erforderlich. Nutzer müssen demnach den Zugriff auf Bedienungshilfen sowie die Erlaubnis zur Bildschirmaufnahme explizit in den Systemeinstellungen freigeben.
Die direkte Steuerung von Betriebssystemen durch KI-Tools wie Copilot erfordert ein tiefes Verständnis der neuen rechtlichen Rahmenbedingungen. Dieser kostenlose Umsetzungsleitfaden zum EU AI Act hilft Ihnen dabei, Fristen, Pflichten und Risikoklassen bei der Nutzung moderner KI-Systeme kompakt zu verstehen. EU AI Act in 5 Schritten verstehen: Jetzt kostenloses E-Book sichern
Kontrolle und Sicherheitsfunktionen für Anwender
Die Steuerung des Computers erfolgt nicht autonom ohne Rücksprache. GitHub sieht vor, dass vor jeder Aktion der KI eine Genehmigung durch den Anwender eingeholt werden muss. Nutzer behalten zudem die Übersicht über Anwendungen, denen sie dauerhafte Berechtigungen erteilt haben; diese Zugriffe lassen sich jederzeit prüfen oder zurücksetzen.
Für Unternehmen bietet der Dienst administrative Kontrollmöglichkeiten. Organisationen können die Funktion „Computer Use“ bei Bedarf zentral deaktivieren, um die Nutzung innerhalb ihrer Infrastruktur zu steuern.
Während neue Technologien die Desktop-Interaktion revolutionieren, stellt die EU-KI-Verordnung Unternehmen vor neue Dokumentationspflichten. Erfahren Sie in diesem kostenlosen Report, welche KI-Anwendungen als Hochrisiko gelten und wie Sie die rechtliche Compliance Ihrer IT-Abteilung sicherstellen. Kostenlosen KI-Umsetzungsleitfaden für Unternehmen herunterladen
Aktivierung und Verfügbarkeit
Die Aktivierung der neuen Funktionen unterscheidet sich je nach gewählter Schnittstelle. In der Copilot-App erfolgt die Freischaltung über das Einstellungsmenü unter dem Punkt „Computer Use“. Nutzer der Befehlszeile steuern die Funktion über spezifische Kommandos: Mit /computer on wird die Unterstützung gestartet, während /computer off sie beendet. Über den Befehl /computer show lässt sich zudem der aktuelle Status abfragen.
Bisher liegen keine Informationen zu einer möglichen Unterstützung des Betriebssystems Linux vor. Auch zur Preisgestaltung oder einem Termin für die allgemeine Markteinführung über die Vorschauphase hinaus machte das Unternehmen keine Angaben. Zudem bleibt bislang unklar, ob und wann die Funktion für Nutzer der kostenfreien Version (Copilot Free) zugänglich gemacht wird.
