GitHub, Copilot’a computer use desteği ekledi. Özellik şu an public preview’da ve GitHub Copilot CLI ile macOS ve Windows’taki GitHub Copilot uygulamasında kullanılabiliyor. Copilot artık masaüstü uygulamalarıyla sizin adınıza etkileşime girebiliyor.
Computer use ne yapıyor
Copilot; uygulamaların erişilebilirlik (accessibility) içeriğini ve görsel bağlamını okuyabiliyor, kontrollere tıklayabiliyor, metin girip düzenleyebiliyor, tuşlara basabiliyor, kaydırma ve sürükleme yapabiliyor ve uygulamalar arası iş akışlarında gezinebiliyor.
Bunun asıl önemi, otomasyonun kapsamının genişlemesi. API’si, komut satırı arayüzü ya da MCP entegrasyonu olmayan legacy ve sadece GUI ile çalışan yazılımlardaki işler de artık Copilot’a devredilebiliyor. Kurumlarda hâlâ yaygın olan eski masaüstü uygulamaları düşünüldüğünde bu, agent’ların ulaşamadığı ciddi bir alanı açıyor.
Videoda Copilot, Safari’de bir masraf raporu akışını yürütüyor. Arka planda her adımda hangi uygulamanın hangi penceresinde hangi elemana tıklandığını argümanlarıyla birlikte görebiliyorsunuz; Copilot ekranı macOS’un accessibility ağacı üzerinden okuyor.
Kontrol sizde kalıyor
Copilot bir uygulamayı kontrol etmeden önce onay istiyor. “Always allow” olarak işaretlediğiniz uygulamaları daha sonra gözden geçirip sıfırlayabiliyorsunuz. macOS’ta computer use, gerekli Accessibility ve Screen Recording izinlerini vermeniz için sizi adım adım yönlendiriyor. Kurum tarafında da organizasyon yönetimli ayarlarla özellik tamamen kapatılabiliyor.
Nasıl açılır
Copilot CLI’da computer use’u açmak için:
/computer onDurumu kontrol etmek için /computer show, kapatmak için /computer off kullanılıyor.
GitHub Copilot uygulamasında ise Settings altından Computer Use bölümüne girip Enable Computer Use seçeneğini açmanız yeterli. Uygulamada da /computer on komutu çalışıyor.
Daha iyi sonuç almak için
GitHub’ın önerisi, Copilot’a istediğiniz sonucu, işin içindeki uygulamaları ve önemli kısıtları net şekilde anlatmanız. Örnek kullanım senaryoları şunlar:
- Tarayıcıdaki bildirimleri özetletmek
- Bir sunumdaki içeriği güncelletmek
- Bir masaüstü uygulamasındaki iş akışında bilgiyi bir adımdan diğerine taşıtmak
Computer use artık büyük AI araçlarının neredeyse standart bir özelliği hâline geliyor, Copilot da bu kervana CLI ve masaüstü uygulamasıyla katılmış oldu. En çok fayda göreceği yer, API’si olmayan iç uygulamalar ve tekrarlayan GUI işleri. Yine de bir agent’a ekran ve klavye kontrolü vermek ciddi bir yetki; onay akışını gözden geçirmeden “always allow” demek yerine uygulama bazında dikkatli izin vermek ve kurumsal ortamda bu ayarı politika ile yönetmek mantıklı olur. Preview aşamasında olduğu için hızlı ve hatasız olmasını beklemek de erken.
Kaynak: https://github.blog/changelog/2026-10-01-github-copilot-can-now-interact-with-desktop-apps/
