Benchmarks & Forschung
16 Einträge in dieser Kategorie. Jeder nennt die konkrete Entscheidung und verlinkt einen öffnbaren Beleg.
Decision Models as Guardrails
Treats typed decisions as guardrails rather than scores, using fixed options to constrain the action set downstream can execute.
Beleghttps://github.com/raxITlabs/decision-models-as-guardrails/blob/main/infra/gcp/laya_server.py#L118
Labelspublic-sourceauthor-reported-metriccall-site-verified
anandi1989/awesome-jev-usecases
README states: ts2.tech: "TypeSafe AI Raises $40 Million for Jev, but Its 445× Cost Claim Is Still Self-Tested": *The skeptical audit of self-tested benchmarks, plus funding verification.*
Beleghttps://github.com/anandi1989/awesome-jev-usecases/blob/main/README.md#L234
Labelsreadme-claim
caiovicentino/eikos
README states: evaluation/eval_jev_suite.py and evaluation/eval_laya_suite.py run the same suites through Jev (API, evaluation
Beleghttps://github.com/caiovicentino/eikos/blob/main/eikos/serve.py#L343
Labelscall-site-verified
codeitlikemiley/system-one-adapter-rust
README states: A drop-in replacement for TypeSafe's system_one evaluation API, backed by LLM
Beleghttps://github.com/codeitlikemiley/system-one-adapter-rust/blob/main/src/client.rs#L15
Labelscall-site-verified
erboland/jev-fund
README states: jev-fund: Open-Source Paper Hedge Fund
Beleghttps://github.com/erboland/jev-fund/blob/main/README.md#L32
Labelsreadme-claim
frankda/jev-poly-crypto-demo
README states: This version implements a live market-data adapter, Jev integration, paper trading and a dashboard. It does not connect a wallet or submit real orders. TRADING_MODE=live is rejected at startup.
Beleghttps://github.com/frankda/jev-poly-crypto-demo/blob/main/scripts/check-jev.ts#L2
Labelscall-site-verified
fstandhartinger/jevbench
README states: Jev is TypeSafe AI's decision model; JevBench also evaluates Jev-compatible systems. The canonical JevBench board is https://benchmarkheaven.com/jev-models.
Beleghttps://github.com/fstandhartinger/jevbench/blob/main/README.md#L5
Labelsreadme-claim
grmkris/robo-harness
README states: Decision runs (bun run jev) let an evaluation model or rules baseline pick bounded joint steps; chat and a decision run never move the arm at the same time.
Beleghttps://github.com/grmkris/robo-harness/blob/main/apps/server/src/decision/strategies.ts#L273
Labelscall-site-verified
kylemclaren/jevpdf
README states: Cheap enough to ask about every line. Jev costs $0.042 per million input tokens, and output is free. Checking every line of a 15-page paper costs well under a cent.
Beleghttps://github.com/kylemclaren/jevpdf/blob/main/server/jev-upstream.ts#L5
Labelscall-site-verified
micytao/vllm-playground
README states: Decision Models (Experimental) — A brand-new sandbox tab for structured-read decisions powered by DiffusionGemma and Jev / System One. Gallery of 12 use cases across 4 tabbed categories (Noul, Choice, Score, Combination)
Beleghttps://github.com/micytao/vllm-playground/blob/main/README.md#L37
Labelsreadme-claim
nexibeo/jev-cookbook
README states: Practical, tested recipes for TypeSafe's Jev, the fast decision model on OpenRouter. Fifteen real-world jobs, each with a runnable script, a small labelled dataset and measured results: support triage, database indexing,
Beleghttps://github.com/nexibeo/jev-cookbook/blob/main/README.md#L5
Labelsreadme-claim
nickthompson480/typesafe-ai-playground
README states: You need Python 3.10 or newer, a modern browser, and a TypeSafe API key to run evaluations. There are no packages to install and no frontend build step.
Beleghttps://github.com/nickthompson480/typesafe-ai-playground/blob/main/server.py#L17
Labelscall-site-verified
pedronauck/skills
README states: jev-engineering — Design and build use cases, POCs and production systems with TypeSafe's Jev decision model (System One): design modes and use-case archetypes, decision state, typed questions, Jev combined with generati
Beleghttps://github.com/pedronauck/skills/blob/main/README.md#L80
Labelsreadme-claim
theSekyi/jevusecases
README states: A directory of real projects, filtered by what they replace, whether they've been benchmarked, and whether there's code to copy — not a marketing site for Jev itself.
Beleghttps://github.com/theSekyi/jevusecases/blob/main/README.md#L5
Labelsreadme-claim
unicodeveloper/jevocks
README states: Jevinik uses Jev, TypeSafe AI's System One evaluation model, to make typed, probabilistic decisions without calling a general-purpose generative LLM.
Beleghttps://github.com/unicodeveloper/jevocks/blob/main/README.md#L11
Labelsreadme-claim
willkelly/jev-evaluation
README states: An adversarial evaluation of jev, the decision model sold by TypeSafe. It
Beleghttps://github.com/willkelly/jev-evaluation/blob/main/jeveval/config.py#L18
Labelscall-site-verified
Auf dieser Seite weiter
Test, Doku, Fälle und Preise verlinken einander. Die nächste Seite liegt auf dieser Site.
Mehr auf dieser Site
- Site-VerzeichnisDie vollständige Liste der Seiten oben.
- ÖkosystemCommunity-Projekte nach Kategorie.
- Jev-CoverageJeder Eintrag nennt Entscheidung und Beleg.
- Tägliche FälleJeden Tag die nächste Gruppe aus dem Korpus.
- CommunityÖffentliche Beiträge, jeder mit Quelle.
- BuildsNotizen zu Modell- und Site-Updates.
- PrimitiveChoice, Noul und Score zusammen.
- MusterRouting, Fan-out und zusammengesetztes Scoring.
- SDKsHTTP, Python und JavaScript.
clavue-jev nutzen
- Ein Urteil versuchenSchreibe einen Zustand und lies die Antwort.
- LiveTetris, sechs schnelle Urteile und eine Sortierung. Kopiere den Aufruf und führe ihn erneut aus.
- LaborSupport-Triage, Release-Review und mehr — bearbeiten und sofort ausführen.
- Vergleichclavue-jev und jev-1.13.0 beantworten dieselbe Frage.
- DemosUrteil-Beispiele, die du bearbeiten kannst.
- PreiseEingabe kostet $0.042 pro Million Token. Ausgabe ist kostenlos.
- APIRufe POST /v1/judge mit einem Key auf.
Doku
- EinführungWofür dieses Modell da ist.
- SchnellstartDas kleinste lauffähige Beispiel.
- System OneHier geschrieben: ein Zustand plus eine typisierte Frage. Das Modell ist clavue-jev.
- ZustandDer Text, den du sendest.
- KonfidenzWie sicher die Antwort ist und wann man darauf handelt.
- ChoiceWähle eine von mehreren sich ausschließenden Optionen.
- NoulEine Ja/Nein-Frage, zurückgegeben als Wahrscheinlichkeit für Ja.
- ScoreEntlang einer Skala bewerten.
- Absichts-RoutingEin Choice-Aufruf leitet die Anfrage weiter.
- Konfidenz-RoutingBei hoher Konfidenz handeln, bei niedriger übergeben.
- Fan-outMehrere Fragen zu einem Zustand.
- Zusammengesetztes ScoringMehrere Scores zu einem Ranking verrechnen.
- HTTP APIDie Anfrageform ohne SDK.
- Python SDKEin Urteil aus Python aufrufen.
- JavaScript SDKEin Urteil aus JavaScript aufrufen.
Fälle
- AnwendungslandkarteWelche Primitive wofür genutzt werden.
- LeitplankenEine Ja/Nein-Prüfung, bevor eine Aktion läuft.
- FunktionsaufrufPer Urteil entscheiden, welche Funktion aufgerufen wird.
- Klassifizieren mit KonfidenzNicht handeln, wenn die Klasse unsicher ist.
- Semantische SucheDie passenden Passagen finden.
- Parallele FragenDen ganzen Satz in einem Aufruf fragen.
- Hierarchische KlassifikationErst grobe Klasse, dann die feine.
- Zitat-PrüfungOb ein Satz durch die Quelle gestützt wird.
- EntitätsabgleichOb zwei Namen dasselbe bezeichnen.
- Skill-VorschlagAus den Kandidaten den passenden Skill wählen.