Configuración de Agent · Terminal-Bench 2.1

Gemini CLI · Gemini 3.1 Pro · high

El objeto clasificado: modelo, andamiaje, herramientas, permisos, presupuesto y entorno en conjunto.

Precisión en la tarea65.8%
Coste por tarea completada con éxitoNo publicado
Intervalo de resultados publicados±3.3%

01

Configuración

Sistema AgentGemini CLI · Gemini 3.1 Pro · high
Modelo baseGemini 3.1 Pro
ID o etiqueta del modelo en la fuenteGemini 3.1 Pro
AndamiajeGemini CLI
Versión del andamiajeNo comunicado
HerramientasTerminal shell
EntornoEntornos de terminal gestionados por Harbor
PresupuestoLímites fijos · al menos 5 intentos por tarea

02

Resultado

Precisión en la tarea65.8%
Puntuación parcialNo publicado
Coste por tarea completada con éxitoNo publicado
Coste comunicado de la prueba de referencia236,49 US$
Mediana del tiempo de finalizaciónNo publicado
Intervención humanaNo publicado

03

Operación

Pruebas de ejecuciones repetidasNo publicado
Intervalo de resultados publicados±3.3%
Nota de seguridadNo publicado
Grupo de comparabilidadterminal-bench-2-1-main
Fecha de evaluación
Datos capturados

04

Confianza

EvidenciaIncluido por el editor del benchmark
FuenteTerminal-Bench 2.1
Instantánea de la fuenteTerminal-Bench 2.1 · clasificación verificada por el editor
Fecha de los datos de la fuente
Recuperado por OpenGPT
Último cambio de la clasificación
Última comprobación
Tareas89 tareas de terminal
Nivel de evidenciaMantenido por el editor
Nota sobre la evidencia

El equipo de Terminal-Bench afirma haber ejecutado y verificado estos envíos. Su versión 2.1 modificó las tareas y el entorno de evaluación.

Abrir auditoría

Qué no demuestra este resultado

Este resultado se aplica al sistema exacto y a las condiciones de la fuente que se muestran aquí. No establece que exista un Agent universalmente superior ni demuestra fiabilidad en producción, gobernanza de datos o rendimiento con una versión diferente del benchmark.

Comparar elementos equivalentes

Solo pueden incluirse en una misma comparación configuraciones de la misma versión de la prueba de referencia y con el mismo alcance de tareas.

Datos comunicados por la fuente; los valores ausentes siguen siendo desconocidos.

Validar antes de adoptar

Las clasificaciones públicas permiten elaborar una lista de finalistas. Una pequeña prueba privada determina si la configuración se adapta a tu trabajo.

  1. 1

    Elige entre 10 y 20 tareas representativas y define una condición de aprobación clara.

  2. 2

    Fija el agente, el modelo, las herramientas, los permisos y el presupuesto antes de realizar la prueba.

  3. 3

    Ejecute cada tarea importante más de una vez; registre el éxito, el coste, el tiempo y las intervenciones humanas.

  4. 4

    Revise los fallos y los riesgos del tratamiento de datos antes de tomar una decisión de producción.

Directorio y evaluaciones de Agents