تكوين Agent · Terminal-Bench 2.1

Codex · GPT-6 Astra · medium

العنصر المرتّب: النموذج والبنية التوجيهية والأدوات والأذونات والميزانية والبيئة معًا.

دقة المهمة87.0%
التكلفة لكل مهمة ناجحةغير منشور
نطاق النتائج المنشورة±1.9%

01

الإعداد

نظام AgentCodex · GPT-6 Astra · medium
النموذج الأساسيGPT-6 Astra
معرّف نموذج المصدر أو تسميتهGPT-6 Astra
البنيةCodex
إصدار القالب الأوليغير مُبلّغ عنه
أدواتTerminal shell
البيئةبيئات طرفية يديرها Harbor
الميزانيةحدود ثابتة · 5 تجارب على الأقل لكل مهمة

02

النتيجة

دقة المهمة87.0%
درجة جزئيةغير منشور
التكلفة لكل مهمة ناجحةغير منشور
تكلفة المعيار المبلغ عنها‏619.07 US$
الوسيط الزمني للإكمالغير منشور
التدخل البشريغير منشور

03

العملية

أدلة التشغيل المتكررغير منشور
نطاق النتائج المنشورة±1.9%
ملاحظة أمانغير منشور
مجموعة القابلية للمقارنةterminal-bench-2-1-main
تاريخ التقييم
البيانات الملتقطة

04

الثقة

الأدلةمدرج لدى ناشر المعيار
المصدرTerminal-Bench 2.1
لقطة المصدرTerminal-Bench 2.1 · لوحة صدارة متحقق منها من الناشر
تاريخ بيانات المصدر
استرجعها OpenGPT
آخر تغيير للترتيب
آخر فحص
المهام89 مهام الطرفية
مستوى الأدلةيتولى الناشر صيانته
ملاحظة الأدلة

يقول فريق Terminal-Bench إنه شغّل هذه الطلبات وتحقق منها. وقد عدّل إصدار 2.1 المهام وبيئة التقييم.

فتح التدقيق

ما الذي لا تثبته هذه النتيجة

تنطبق هذه النتيجة على النظام المحدد وظروف المصدر المعروضة هنا فحسب. ولا تثبت وجود وكيل هو الأفضل عالميًا، أو موثوقية في بيئة الإنتاج، أو حوكمة للبيانات، أو أداءً على إصدار مختلف من المعيار المرجعي.

قارن المتماثل بالمتماثل

لا يمكن وضع إعدادات في مقارنة واحدة إلا إذا كانت من إصدار المعيار ونطاق المهمة نفسيهما.

بيانات أبلغ عنها المصدر؛ تبقى القيم المفقودة مجهولة.

تحقّق قبل الاعتماد

تنشئ التصنيفات العامة قائمة مختصرة. وتحدد تجربة خاصة صغيرة ما إذا كان الإعداد يلائم عملك.

  1. 1

    اختر من 10 إلى 20 مهمة تمثيلية وحدد شرط اجتياز واضحًا.

  2. 2

    ثبّت الوكيل والنموذج والأدوات والأذونات والميزانية قبل الاختبار.

  3. 3

    نفّذ كل مهمة مهمة أكثر من مرة؛ وسجّل النجاح والتكلفة والوقت وحالات تولي الإنسان للمهمة.

  4. 4

    راجع الإخفاقات ومخاطر معالجة البيانات قبل اتخاذ قرار بشأن بيئة الإنتاج.

دليل Agent والتقييمات