JevCodenican2018/shade-arena-jev-monitor
A decisão
README states: Strong per-action gate. Scoring each tool call before it runs, Jev ranked sabotage above almost all benign actions. Gemini Flash's scores piled up at 0 and 100.
Link da evidência
https://github.com/nican2018/shade-arena-jev-monitor/blob/main/llms/typesafe_llm.py#L20
Rótulos de verificação
call-site-verifiedFoi localizado código público que chama o Jev e consome sua resposta.
Os rótulos descrevem o tipo de evidência; não são uma nota nem um ranking.
Categoria
- Categoria
- Outras listas
- Repositório
- https://github.com/nican2018/shade-arena-jev-monitor
- Adicionado em
- 2026-10-29
- Revisado em
- 2026-10-29
Continue neste site
Teste, documentação, casos e preços se ligam entre si. A próxima página está neste site.
Mais neste site
- Diretório do siteA lista completa das páginas acima.
- EcossistemaProjetos da comunidade por categoria.
- Cobertura JevCada entrada indica a decisão e a evidência.
- Casos diáriosO lote seguinte do banco, todos os dias.
- ComunidadePublicações públicas, cada uma com sua fonte.
- BuildsNotas sobre as atualizações do modelo e do site.
- PrimitivasChoice, Noul e Score juntos.
- PadrõesRoteamento, fan-out e pontuação composta.
- SDKHTTP, Python e JavaScript.
Usar o clavue-jev
- Tentar um julgamentoEscreva um estado e leia a resposta.
- Cenas ao vivoTetris, seis julgamentos rápidos e uma classificação. Copie a chamada e execute de novo.
- LaboratórioTriagem de suporte, revisão de release e mais: edite e execute na hora.
- Compararclavue-jev e jev-1.13.0 respondem à mesma pergunta.
- DemosExemplos de julgamento que você pode editar.
- PreçosA entrada custa $0.042 por milhão de tokens. A saída é grátis.
- APIChame POST /v1/judge com uma chave.
Documentação
- IntroduçãoPara que serve este modelo.
- Início rápidoA menor chamada que funciona.
- System OneEscrito aqui: um estado mais uma pergunta tipada. O modelo é clavue-jev.
- EstadoO texto que você envia.
- ConfiançaQuão segura é a resposta, e quando agir.
- ChoiceEscolher uma opção mutuamente exclusiva.
- NoulUma pergunta sim/não, retornada como probabilidade de sim.
- ScorePontuar numa escala.
- Roteamento de intençãoUma chamada Choice encaminha a requisição.
- Roteamento por confiançaAgir se a confiança for alta; repassar se for baixa.
- Fan-outFazer várias perguntas a um estado.
- Pontuação compostaCombinar várias pontuações em um ranking.
- HTTP APIA forma da requisição sem SDK.
- SDK PythonChamar um julgamento do Python.
- SDK JavaScriptChamar um julgamento do JavaScript.
Casos
- Mapa de casos de usoQual primitiva se usa para cada tarefa.
- GuardrailsUma checagem sim/não antes de uma ação.
- Chamada de funçãoDecidir por julgamento qual função chamar.
- Classificar com confiançaNão agir quando a classe é incerta.
- Busca semânticaEncontrar as passagens que combinam.
- Perguntas paralelasPerguntar todo o conjunto em uma chamada.
- Classificação hierárquicaPrimeiro a classe grossa, depois a fina.
- Verificação de citaçãoSe uma frase é sustentada pela fonte.
- Alinhamento de entidadesSe dois nomes são a mesma coisa.
- Sugestão de habilidadeEscolher a habilidade que cabe agora.