
جديد الذكاء الاصطناعي.. مايكروسوفت تتيح ميزة تتحكم في الشاشة بدون تدخل

أعلنت مايكروسوفت عن ميزة جديدة تتيح "للوكلاء القائمين على الذكاء الاصطناعي" التنقل بشكل مستقل بين أزرار الشاشة، وتحديد البيانات، وملء الحقول النصية بناءً على طلب المستخدم.
الميزة متاحة من خلال منصة " Copilot Studio"
الميزة الجديدة، التي تحمل اسم "استخدام الكمبيوتر"، متاحة من خلال منصة التابعة للشركة، وقد تم إطلاقها حاليًا في مرحلة "المعاينة البحثية" لمجموعة مختارة من المستخدمين الذين يتمتعون بحق الوصول المبكر.
وتسمح الميزة بإمكان وكلاء الذكاء الاصطناعي تنفيذ المهام تلقائيًا عبر أي تطبيق على سطح المكتب أو من خلال متصفحات الإنترنت مثل إيدج وكروم وفايرفوكس، وقالت مايكروسوفت في منشور عبر مدونتها: "إذا كان بإمكان الشخص استخدام التطبيق، يمكن للوكيل أيضًا".
إدخال كميات كبيرة من البيانات من مصادر متعددة
وأضافت الشركة: "تخيل سيناريو تحتاج فيه مؤسسة ما إلى إدخال كميات كبيرة من البيانات من مصادر متعددة في نظام مركزي، وميزة "استخدام الكمبيوتر" يمكن أن تقوم بأتمتة هذه العملية، مما يقلل من الجهد اليدوي ويُحد من الأخطاء".
ويمكن استخدام الميزة أيضًا لأتمتة مهام الدعم الأخرى مثل أبحاث السوق ومعالجة الفواتير، وأوضحت الشركة أن وكلاء الذكاء الاصطناعي سيكونون قادرين على تنفيذ المهام حتى في غياب واجهات برمجة التطبيقات APIs.
الميزة تتيح للوكلاء معالجة المشكلات
وأكدت مايكروسوفت أن ميزة "استخدام الكمبيوتر" مزودة بإمكانات استدلال مدمجة، تتيح للوكلاء معالجة المشكلات ذاتيًا والاستمرار في تنفيذ المهام دون انقطاع، وعلى عكس أدوات مشابهة تعتمد على وكلاء الذكاء الاصطناعي مثل Operator من أوبن إيه أي وManus، والتي تتطلب تدخلاً بشريًا عند مواجهة اختبارات التحقق CAPTCHA، فإن أداة مايكروسوفت مصممة لتجاوز مثل هذه العقبات.
عندما تتواصل الأزرار تواصل الأداة العمل
وقالت الشركة: "عندما تتغير الأزرار أو الشاشات، تواصل الأداة العمل دون تعطيل سير العمل"، ويمكن للمستخدمين اختيار عرض سجل الأنشطة التي نفذها الوكيل، بما في ذلك لقطات الشاشة التي تم التقاطها والخطوات التي اتبعها لحل المشكلات.