OpenGPTModelkeuzes op basis van bewijsBinaire voltooiing20.6%Kosten per geslaagde taakNiet gepubliceerdBereik van gepubliceerde resultatenNiet gepubliceerd
Agentdetails →Gedeeld benchmarkbereik · OSWorld 2.0
Agentvergelijking binnen dezelfde benchmark
De onderstaande items delen hetzelfde benchmarkbereik. Hun exacte scaffolds, modelversies, datums en oorspronkelijke bronwaarden blijven zichtbaar.
Een hogere bronwaarde duidt uitsluitend op betere prestaties binnen deze benchmark en configuratie. Het is geen score die vergelijking tussen verschillende benchmarks mogelijk maakt van die iets zegt over de geschiktheid voor productiegebruik.
Vergelijk vergelijkbare zaken
Beslissingsoverzicht
Alleen configuraties uit dezelfde benchmarkversie en hetzelfde taakbereik kunnen in één vergelijking worden geplaatst.
Binaire voltooiing18.52%Kosten per geslaagde taakNiet gepubliceerdBereik van gepubliceerde resultatenNiet gepubliceerd
Agentdetails →18 identieke van volledig niet-gerapporteerde velden verborgen
| Agentsysteem | OSWorld Agent · Claude Opus 4.8 · Max · Batched tool | OSWorld Agent · Claude Opus 4.8 · Max · Standard |
|---|---|---|
| Configuratie | ||
| Hulpmiddelen | Gebatchte tool voor computergebruik | Standaardhulpmiddel voor computergebruik |
| Resultaat | ||
| Binaire voltooiing | 20.6% | 18.52% |
| Gedeeltelijke score | 54.8% | 49.33% |
| Bron | ||
| Bron openen | Bron openen ↗ | Bron openen ↗ |
Configuratie
OSWorld Agent · Claude Opus 4.8 · Max · Batched tool
- Hulpmiddelen
- Gebatchte tool voor computergebruik
OSWorld Agent · Claude Opus 4.8 · Max · Standard
- Hulpmiddelen
- Standaardhulpmiddel voor computergebruik
Resultaat
OSWorld Agent · Claude Opus 4.8 · Max · Batched tool
- Binaire voltooiing
- 20.6%
- Gedeeltelijke score
- 54.8%
OSWorld Agent · Claude Opus 4.8 · Max · Standard
- Binaire voltooiing
- 18.52%
- Gedeeltelijke score
- 49.33%
Bron
OSWorld Agent · Claude Opus 4.8 · Max · Batched tool
OSWorld Agent · Claude Opus 4.8 · Max · Standard
Door bron gerapporteerde gegevens; ontbrekende waarden blijven onbekend.
Valideren vóór ingebruikname
Openbare ranglijsten leveren een shortlist op. Een kleine privéproef bepaalt van de configuratie bij uw werk past.
- 1
Kies 10–20 representatieve taken en definieer een duidelijke slaagvoorwaarde.
- 2
Vergrendel de agent, het model, de hulpmiddelen, rechten en het budget voordat u test.
- 3
Voer elke belangrijke taak meerdere keren uit; leg succes, kosten, tijd en overnames vast.
- 4
Beoordeel fouten en risico's bij gegevensverwerking vóór een productiebeslissing.