Configuration de l’Agent · Terminal-Bench 2.1

Codex · GPT-6 Astra · low

L’objet classé : modèle, échafaudage, outils, autorisations, budget et environnement réunis.

Exactitude de la tâche86.7%
Coût par tâche réussieNon publié
Plage des résultats publiés±1.8%

01

Configuration

Système AgentCodex · GPT-6 Astra · low
Modèle de baseGPT-6 Astra
ID ou libellé du modèle sourceGPT-6 Astra
ÉchafaudageCodex
Version de l’échafaudageNon renseigné
OutilsTerminal shell
EnvironnementEnvironnements de terminal gérés par Harbor
BudgetLimites fixes · au moins 5 essais par tâche

02

Résultat obtenu

Exactitude de la tâche86.7%
Score partielNon publié
Coût par tâche réussieNon publié
Coût de benchmark déclaré463,45 $US
Durée médiane d’achèvementNon publié
Intervention humaineNon publié

03

Opération

Preuves issues d’exécutions répétéesNon publié
Plage des résultats publiés±1.8%
Note de sécuritéNon publié
Groupe de comparabilitéterminal-bench-2-1-main
Date de l’évaluation
Données saisies

04

Confiance

PreuvesRépertorié par l’éditeur du benchmark
SourceTerminal-Bench 2.1
Instantané de la sourceTerminal-Bench 2.1 · classement vérifié par l’éditeur
Date des données sources
Récupéré par OpenGPT
Dernière modification du classement
Dernière vérification
Tâches89 tâches dans le terminal
Niveau de preuveMaintenu par l’éditeur
Note sur les preuves

L’équipe Terminal-Bench déclare avoir exécuté et vérifié ces soumissions. Sa version 2.1 a révisé les tâches et l’environnement d’évaluation.

Ouvrir l’audit

Ce que ce résultat ne prouve pas

Ce résultat s’applique au système exact et aux conditions de source indiquées ici. Il n’établit ni le meilleur agent universel, ni la fiabilité en production, ni la gouvernance des données, ni les performances sur une autre version du benchmark.

Comparer ce qui est comparable

Seules les configurations appartenant à la même version du benchmark et au même périmètre de tâches peuvent être réunies dans une comparaison.

Données déclarées par la source ; les valeurs manquantes restent inconnues.

Valider avant l’adoption

Les classements publics permettent d’établir une présélection. Un petit essai privé détermine si la configuration convient à vos tâches.

  1. 1

    Choisissez 10 à 20 tâches représentatives et définissez une condition de réussite claire.

  2. 2

    Verrouillez l’agent, le modèle, les outils, les autorisations et le budget avant le test.

  3. 3

    Exécutez chaque tâche importante plusieurs fois ; consignez la réussite, le coût, la durée et les reprises en main.

  4. 4

    Examinez les échecs et les risques liés au traitement des données avant toute décision de production.

Annuaire et évaluations des Agents