كان Copilot يحتاج إلى API أو سطر أوامر ليعمل مع أي برنامج، وصار الآن ينقر ويكتب داخل الواجهات الرسومية مباشرة بعد موافقتك.
ضمن ملف: مايكروسوفت والذكاء الاصطناعي، وكلاء الذكاء الاصطناعي
بقلم: ليلى | محررة أدوات المطورين · صوت تحريري بإشراف بشري
المصدر الأساسي: GitHub Changelog
لماذا يهم
المطورون وفرق التشغيل الذين يعتمدون على برامج قديمة بلا API أصبح بإمكانهم أتمتتها عبر Copilot. وفرق الأمن في المؤسسات مطالبة الآن بتحديد سياسة واضحة لصلاحيات تسجيل الشاشة والتحكم بالتطبيقات.
صار GitHub Copilot قادراً على تشغيل تطبيقات سطح المكتب نيابة عنك. يستطيع النقر على الأزرار وكتابة النصوص وتحريك المؤشر والتنقل بين البرامج. الميزة اسمها استخدام الحاسوب (Computer use)، وهي متاحة الآن في معاينة عامة داخل Copilot CLI وتطبيق GitHub Copilot على macOS وWindows، بحسب سجل تغييرات GitHub. الخبر مصدره إعلان رسمي وحيد من الشركة، ولم يتسنَّ التحقق من أداء الميزة بشكل مستقل حتى الآن.
تذكر GitHub في إعلانها قائمة محددة بما يستطيع Copilot فعله. يقرأ المحتوى المتاح عبر واجهات الوصول في التطبيقات ويفهم السياق البصري على الشاشة، ثم ينقر على عناصر التحكم ويُدخل النصوص ويعدّلها. ويضغط المفاتيح ويمرّر الصفحات ويسحب العناصر، ويتنقل في مسارات عمل تمتد عبر أكثر من تطبيق. المثال الذي عرضته الشركة هو تعبئة تقرير مصروفات في متصفح Safari. القيمة الحقيقية هنا في البرامج القديمة والبرامج التي لا تعمل إلا بواجهة رسومية، أي تلك التي لا توفر API ولا واجهة سطر أوامر ولا تكاملاً عبر MCP. في هذه الحالات لم يكن أمام الوكيل الذكي أي منفذ آخر.
الأمر الذي يقلق معظم المطورين هو مستوى التحكم. تقول GitHub إن Copilot يطلب موافقتك قبل أن يتحكم بأي تطبيق. ويمكنك مراجعة التطبيقات التي سمحت له بها بشكل دائم أو إعادة ضبطها. على macOS ترشدك الميزة إلى منح صلاحيتي إمكانية الوصول (Accessibility) وتسجيل الشاشة (Screen Recording)، وهما مطلوبتان لعملها. وتستطيع المؤسسات تعطيل الميزة كلياً من الإعدادات التي تديرها. خطوات التفعيل بحسب الإعلان:
- في Copilot CLI، شغّل الأمر /computer on لتفعيل الميزة.
- استخدم /computer show لمعرفة حالتها، و/computer off لإيقافها.
- في تطبيق GitHub Copilot، افتح الإعدادات (Settings) واختر Computer Use، ثم فعّل خيار Enable Computer Use. ويعمل الأمر /computer on داخل التطبيق أيضاً.
- على macOS، امنح صلاحيتي Accessibility وScreen Recording عندما تطلبهما الميزة.
- اكتب طلبك بثلاثة عناصر: النتيجة التي تريدها، والتطبيقات المعنية، وأي قيود مهمة. من أمثلة GitHub: تلخيص الإشعارات في المتصفح، أو تحديث محتوى عرض تقديمي، أو نقل معلومات عبر مسار عمل في تطبيق مكتبي.
هناك تفاصيل غابت عن الإعلان. لم تحدد GitHub خطط الاشتراك التي تشمل الميزة، ولا موعد خروجها من المعاينة إلى الإتاحة العامة، ولم تذكر Linux بين الأنظمة المدعومة. وفي تقديرنا، صلاحية تسجيل الشاشة ليست تفصيلاً صغيراً. وكيل يرى كل ما على شاشتك ويتحرك داخل تطبيقاتك يحتاج سياسة واضحة لدى فرق الأمن قبل أن يصل إلى أجهزة الشركة. لذلك فإن خيار التعطيل المؤسسي ضروري، وليس مجرد إضافة. ومن يريد التفاصيل التقنية الكاملة يجد شرح GitHub في وثائق استخدام الحاسوب في Copilot، وكل التحديثات اللاحقة ستُنشر في سجل تغييرات GitHub.
المصادر
- GitHub Copilot can now interact with desktop apps with computer use – GitHub Changelog github.blog
- About computer use in GitHub Copilot – GitHub Docs docs.github.com
- GitHub Changelog github.blog
