تقدم Openia المشغل – الوكيل الذي يمكنه استخدام الكمبيوتر نيابةً عنك
مثل استخدام كمبيوتر Anthropic وGoogle Deepak’s Mariner، يقوم المشغل بالتقاط لقطات شاشة لشاشة الكمبيوتر ومسح وحدات البكسل لتحديد الإجراءات التي يمكنه تنفيذها. النموذج الكامن وراءه هو نفس واجهات المستخدم الرسومية ومربعات النص والقوائم والقوائم التي يستخدمها الأشخاص عندما يقومون بالأشياء. فهو يقوم بمسح الشاشة، وتنفيذ إجراء واحد، ثم مسح الشاشة مرة أخرى، وتنفيذ إجراء آخر، وما إلى ذلك. يسمح بالعمل على معظم مواقع الويب الخاصة بالنموذج الذي يمكن لأي شخص استخدامه.
“تقليديًا، كانت الطريقة التي تستخدم بها النماذج البرامج هي ACI المتخصصة. ولكن إذا قمت بإنشاء نموذج يمكنه استخدام نفس الواجهة التي يستخدمها الإنسان على أساس يومي، فقد كان بعيدًا عن متناول اليد في السابق.”
يحاول الغراب أيضًا العمل واحدًا تلو الآخر بخطوات صغيرة، وعندما يعلق. قامت OpenG بتدريب Kaya على التقنيات المستخدمة في ما يسمى بالنماذج المنطقية، O1 وO3.
يفتح
قامت OpenEye باختبار Q ضد وكيل للعمل على جهاز كمبيوتر. تدعي الشركة أن نموذجها يتفوق على Mariner في استخدام الكمبيوتر وكل شيء.
على سبيل المثال، في Osworld، وهو وكيل مثل دمج ملفات PDF أو استخدام الكمبيوتر، حصل استخدام الكمبيوتر على درجة 38.0%. يقوم Webvoyager باستدعاء Webin an، في نافذة nch، والذي يختبر أن وكيل CAN هو 87%، وmariner 83.5%، ويستخدم الكمبيوتر 56%. (يمكن لـ Mariner العمل في متصفح واحد فقط، وبالتالي لا يسجل نقاطًا في Osworld.)
في الوقت الحالي، يمكن للمشغل العمل فقط في المتصفح. تخطط Openi لإتاحة الإمكانات على مستوى المستودع في المستقبل من خلال واجهة برمجة التطبيقات (API) التي يمكن للمطورين الآخرين استخدامها لإنشاء تطبيقاتهم الخاصة. وهكذا استخدم مانبوكار الكمبيوتر في ديسمبر.
قال أوبنساي إن ريد يطلب من فرق البحث معرفة متى نستخدم التعليمات المخفية المصممة للسماح بذلك، ومتى ينهار النموذج أولاً، قم بإيقاف المستخدم وتدريب المستخدم على الحصول على المعلومات.
ينظر! لا أيدي
لاستخدام عامل التشغيل، ما عليك سوى كتابة التعليمات في مربع النص. ولكن بدلاً من استدعاء المتصفح الموجود على جهاز الكمبيوتر الخاص بك، يرسل المشغل تعليماتك إلى متصفح بعيد يعمل على خادم مفتوح. يدعي Openy أن هذا يجعل النظام أكثر كفاءة. وهذا فرق رئيسي آخر بين المشغل واستخدام الكمبيوتر وMariner (الذي يقوم بتشغيل متصفح Google Chrome على الكمبيوتر).
