OpenGPTDecisões de modelos com evidênciasDocumentos e perguntas e respostas fundamentadas
Arquivos longos, resumos, citações e respostas delimitadas pelo texto fornecido.
- Por que estes candidatos
- Assumption · Historical. Compare modelos indicados para contexto contínuo ou recuperação empresarial e depois teste o comportamento exato de citação e recusa.
- O que permanece incerto
- As declarações sobre a janela de contexto não comprovam a qualidade da recuperação nem o uso fiel de um documento longo.
Três versões oficiais para testar primeiro
Os dados públicos delimitam as opções. Eles não substituem um teste controlado no seu próprio trabalho. Selecione dois ou três candidatos para comparar dados públicos lado a lado.
Unknown · Not automatically certified
No momento, nenhum resultado público comparável está mapeado para esta versão exata.
Evidência públicaOs modelos usam escalas diferentes de evidências públicas. Evidências ausentes não são tratadas como zero, e o OpenGPT não combina fontes distintas em uma só pontuação.＋
Um ponto de partida prático, não um vencedor universalSelecione dois ou três candidatos para comparar dados públicos lado a lado.＋
Os modelos usam escalas diferentes de evidências públicas. Evidências ausentes não são tratadas como zero, e o OpenGPT não combina fontes distintas em uma só pontuação.
As declarações sobre a janela de contexto não comprovam a qualidade da recuperação nem o uso fiel de um documento longo.
A avaliação é aberta com este modelo de tarefa e os dois primeiros modelos selecionados. Você pode editar todas as tarefas antes de coletar respostas.