وكلاء أوبن أي آي ينجزون نصف مهام الأبحاث


أعلنت شركة أوبن أي آي في 18 نوفمبر أن وكلاء البرمجة التابعين لها باتوا ينجزون قرابة نصف المهام البحثية متوسطة الطول دون أي مساعدة بشرية، مع تأكيدها أن المكاسب لا تزال متفاوتة. وجددت الشركة دعوتها لإلزام مختبرات الذكاء الاصطناعي بتتبع مؤشرات التحسين الذاتي التكراري والإفصاح عنها علنا.
كشفت بيانات داخلية نشرتها شركة أوبن أي آي عن قفزة متسارعة في اعتماد باحثيها على وكلاء البرمجة لإنجاز المهام البحثية المستقلة، غير أن هذا التقدم يرسم حدودا متعرجة تجمع بين النجاح العالي في مراقبة التدريب والحاجة المستمرة للإشراف البشري الدقيق وتكثيف أبحاث السلامة.
أعلنت شركة أوبن أي آي في 18 نوفمبر أن وكلاء البرمجة التابعين لها باتوا يكملون قرابة نصف المهام البحثية متوسطة المدة دون أي تدخل أو مساعدة بشرية، لكنها أضافت أن هذه المكاسب غير متساوية وأن البشر «يظلون جزءا جوهريا من حلقة أبحاث الذكاء الاصطناعي». وفي تقريرها البحثي المعنون «تسريع الأبحاث: الحدود المتعرجة» المنشور عبر موقع أوبن أي آي الرسمي، قدرت الشركة أن معدل نجاح الوكلاء دون تدخل بشري في المهام التي تتطلب ما بين ساعتين و4 ساعات من العمل البشري ارتفع من 23 في المئة في شهر مارس إلى 46 في المئة في شهر أكتوبر، أما في المهام المقدرة ما بين 4 و8 ساعات فقد قفز المعدل من 13 في المئة إلى 35 في المئة.
وجددت أوبن أي آي كذلك دعوتها لإلزام مختبرات الذكاء الاصطناعي قانونيا بتتبع مؤشرات التحسين الذاتي التكراري والإفصاح عنها علنا، وهو المفهوم الذي يعني قيام الذكاء الاصطناعي بتسريع تطوير أجيال جديدة من الذكاء الاصطناعي المستقبلي كما استعرضت مجلة بي سي ماغ في تغطيتها لأدوات البحث الداخلية للشركة، مشددة على أن إفصاحها الخاص «لا ينبغي قراءته بوصفه نية للسعي وراء التحسين الذاتي التكراري الكامل».
تباينت النتائج على نطاق واسع باختلاف طبيعة العمل البحثي؛ فخلال الفترة الممتدة من 1 أغسطس إلى 18 أكتوبر، نجح الوكلاء دون تدخل بشري بنسبة 79 في المئة من المرات عند مراقبة دورات التدريب، وبنسبة 35 في المئة عند إطلاق دورات التدريب، وبنسبة 25 في المئة فقط عند كتابة الشفرات البرمجية الخاصة ببنية الاستدلال وتقديم الخدمة. وحذرت الشركة من أن الباحثين ربما غيروا نوعية المهام التي يسندونها إلى الوكلاء داخل كل فئة زمنية، ولذلك فإن ارتفاع معدلات النجاح لا يعكس تحسن النماذج وحدها، كما نبهت إلى أن مدد المهام المذكورة تصف الجهد البشري التقديري وليس المدة الزمنية التي استغرقها تشغيل الوكلاء فعليا.
نما استخدام الوكلاء بوتيرة سريعة للغاية؛ فبحساب الأسعار المعلنة لواجهة برمجة التطبيقات، استهلك الباحث الوسيط ما يعادل نحو 2400 دولار من عمل الوكلاء يوميا في شهر أكتوبر، بزيادة قدرها 62 في المئة مقارنة بشهر سبتمبر، بينما استهلك الباحثون في الشريحة المئوية التسعين الأعلى استخداما نحو 23000 دولار يوميا، بزيادة بلغت 105 في المئة. وتضاعف عدد أيام عمل الوكلاء لكل باحث، باحتساب كل 8 ساعات من استخدام الوكيل يوم عمل واحد، أحد عشر ضعفا ليرتفع من 0.5 يوم إلى 5.7 أيام. وفي استطلاع شمل 101 من موظفي الأبحاث، أفاد المشارك الوسيط بأنه مستعد للتخلي عن 30 في المئة من القدرة الحاسوبية لفريقه، أو 40 في المئة من عدد أعضاء الفريق، مقابل الاحتفاظ بوكلاء البرمجة الطليعيين لمدة 3 أشهر.
ذكر الباحثون الذين أجريت معهم مقابلات داخل التقرير أن الوكلاء ما زالوا يظهرون ذائقة بحثية ضعيفة وينتجون طلبات دمج برمجية توصف بأنها «مخلفات ذكاء اصطناعي رديئة» تتطلب رقابة لصيقة ومستمرة. ووصف أحد الباحثين آلية العمل اليومية مع الوكلاء بهذه العبارة الدقيقة: «اذهب واصنع نموذجا واحدا، سأراجعه وأجري التعديلات اللازمة، ثم اذهب وأنجز البقية».
ارتفعت أسابيع العمل الموثقة في مجالي السلامة والمحاذاة بنسبة 77 في المئة بين شهري يناير وسبتمبر، وهي الزيادة المطلقة الأكبر بين جميع مجالات البحث داخل الشركة. وربطت أوبن أي آي هذا التسارع بتداعيات حادثة منصة هاغينغ فيس التي وقعت في شهر يوليو الماضي، وكتب الباحث في أوبن أي آي ديفيد هولتز عبر منصة «إكس» أن الباحثين «يكرسون مزيدا ومزيدا من الوقت للسلامة والمحاذاة». وتبني حملة الإفصاح هذه على مسودة الحوكمة التي طرحتها أوبن أي آي في شهر يونيو، والتي اقترحت قواعد فيدرالية تلزم الشركات بتقديم تقارير شفافية حول تتبع التحسين الذاتي التكراري، وطالبت المركز الأمريكي لمعايير وابتكارات الذكاء الاصطناعي بتطوير منهجيات لقياسه، مع إشارة التقرير نفسه إلى أن زيادة حجم الشفرات البرمجية والتجارب «لا تعني بالضرورة تسارع التقدم البحثي الحقيقي».
السؤال: كيف تطورت معدلات نجاح وكلاء أوبن أي آي في إنجاز المهام البحثية دون تدخل بشري؟
الإجابة: ارتفعت نسبة النجاح دون تدخل بشري في المهام التي تستغرق من ساعتين إلى 4 ساعات من 23 في المئة في مارس إلى 46 في المئة في أكتوبر، وفي مهام 4 إلى 8 ساعات من 13 في المئة إلى 35 في المئة.
السؤال: في أي المهام البحثية يتفوق الوكلاء وفي أيها يتراجع أداؤهم المستقل؟
الإجابة: حقق الوكلاء نجاحا بنسبة 79 في المئة في مراقبة دورات التدريب، مقابل 35 في المئة عند إطلاقها، و25 في المئة فقط عند كتابة شفرات أنظمة الاستدلال وتقديم الخدمة، مع استمرار حاجتهم لإشراف بشري لضبط الجودة.
السؤال: كم تبلغ القيمة المالية التقديرية لاستهلاك الباحثين اليومي من عمل الوكلاء داخل أوبن أي آي؟
الإجابة: بلغ استهلاك الباحث الوسيط في شهر أكتوبر نحو 2400 دولار يوميا بأسعار واجهة برمجة التطبيقات، بينما وصل استهلاك أعلى 10 في المئة من الباحثين إلى نحو 23000 دولار يوميا.
السؤال: لماذا زادت أسابيع العمل المخصصة للسلامة والمحاذاة بنسبة 77 في المئة داخل الشركة؟
الإجابة: جاءت هذه الزيادة استجابة لتداعيات حادثة منصة هاغينغ فيس في يوليو الماضي، وبالتوازي مع مقترح أوبن أي آي الفيدرالي لإلزام المختبرات بتتبع مؤشرات التحسين الذاتي التكراري والإبلاغ عنها بشفافية.