Configuración de Agent · τ³-Banking Knowledge

τ³ Banking AllTools · Qwen 3.8 Max · xhigh

El objeto clasificado: modelo, andamiaje, herramientas, permisos, presupuesto y entorno en conjunto.

Superado¹55.15%
Coste por tarea completada con éxitoNo publicado
Intervalo de resultados publicadosNo publicado

01

Configuración

Sistema Agentτ³ Banking AllTools · Qwen 3.8 Max · xhigh
Modelo baseQwen 3.8 Max
ID o etiqueta del modelo en la fuenteQwen 3.8 Max · xhigh
Andamiajeτ³ standard agent
Versión del andamiajev1.0.1
HerramientasAllTools: BM25, text-embedding-3-large retrieval, and sandboxed shell
EntornoAndamiaje estándar con BM25, recuperación mediante embeddings y búsqueda de línea de comandos en un entorno aislado
Presupuesto4 pruebas por tarea · 388 trayectorias por configuración

02

Resultado

Superado¹55.15%
Puntuación parcialNo publicado
Coste por tarea completada con éxitoNo publicado
Coste comunicado de la prueba de referenciaNo comunicado
Mediana del tiempo de finalizaciónNo publicado
Intervención humanaNo publicado

03

Operación

Pruebas de ejecuciones repetidas4 ejecuciones
Intervalo de resultados publicadosNo publicado
Nota de seguridadNo publicado
Grupo de comparabilidadtau3-banking-v1-0-1-alltools-gpt-5-2-low-seed-300-4-trials
Fecha de evaluación
Datos capturados

04

Confianza

EvidenciaIncluido por el editor del benchmark
FuenteSierra Research · τ³-Banking
Instantánea de la fuentev1.0.1 · AllTools · GPT-5.2 low user simulator · seed 300 · 4 trials
Fecha de los datos de la fuente
Recuperado por OpenGPT
Último cambio de la clasificación
Última comprobación
Tareas97 tareas de conocimientos bancarios
Nivel de evidenciaMantenido por el editor
Nota sobre la evidencia

Las filas incluidas comparten el benchmark v1.0.1, la división Banking Knowledge de 97 tareas, la configuración AllTools, el simulador de usuario, la semilla y el protocolo de cuatro intentos. Los costes no publicados siguen figurando como desconocidos.

Abrir auditoría

Qué no demuestra este resultado

Este resultado se aplica al sistema exacto y a las condiciones de la fuente que se muestran aquí. No establece que exista un Agent universalmente superior ni demuestra fiabilidad en producción, gobernanza de datos o rendimiento con una versión diferente del benchmark.

Comparar elementos equivalentes

Solo pueden incluirse en una misma comparación configuraciones de la misma versión de la prueba de referencia y con el mismo alcance de tareas.

Datos comunicados por la fuente; los valores ausentes siguen siendo desconocidos.

Validar antes de adoptar

Las clasificaciones públicas permiten elaborar una lista de finalistas. Una pequeña prueba privada determina si la configuración se adapta a tu trabajo.

  1. 1

    Elige entre 10 y 20 tareas representativas y define una condición de aprobación clara.

  2. 2

    Fija el agente, el modelo, las herramientas, los permisos y el presupuesto antes de realizar la prueba.

  3. 3

    Ejecute cada tarea importante más de una vez; registre el éxito, el coste, el tiempo y las intervenciones humanas.

  4. 4

    Revise los fallos y los riesgos del tratamiento de datos antes de tomar una decisión de producción.

Directorio y evaluaciones de Agents