openJev-verdict-2.0

Notas do quadrante

Ver o quadrante completo

Pontuação pela rubrica pública do quadrante (maturidade × capability; bolha = adoção). Revisamos conforme a evidência.

• Maturidade3.5/10

  Pesos Apache + dashboard/WebGPU no dia um, mas release independente novinho sem histórico de ops — maturidade baixa.

• Capability5.5/10

  JevBench oficial (17/10): Intelligence 4,1, calibração 49,1, p50 0,269 s. Primitivos completos em ~150M ModernBERT com claims agressivos de acc/ECE; toda comparação Jev/Laya continua UnverifiedClaim.

• Adoção12/100

  README + dashboard altos na onda S1Bench; prova de comunidade ainda cedo além dos canais do autor.

Vendor claims

• UnverifiedClaim: top-1 ~77.10% em LocalLLaMA/typed-decisions held-out N=2000 (tabela do autor vs Laya/Jev)[Claim do fornecedor — não verificado independentemente]
• UnverifiedClaim: ECE do correctness-head ~1.44% / ~20-25ms por decisão (autor)[Claim do fornecedor — não verificado independentemente]
• ModernBERT-base ~149.6M; Apache-2.0; playground WebGPU / GitHub Pages (autor)[Claim do fornecedor — não verificado independentemente]

publicado (OK do Fabricio 17/10 BRT). Auditoria dos placares de 17/10/2026: veja a seção “Auditoria dos placares” abaixo; onde ela conflita com afirmações antigas de placar nesta página, ela vale.

openJev-verdict-2.0 é um modelo independente ~150M ModernBERT-base para Choice / Score / Noul tipados (→ boolean no catálogo) em passes não-autorregressivos — não é TypeSafe.

Pesos: heman10x/openJev-verdict-2.0; repo: github.com/Heman10x-NGU/openJev-verdict-2.0; dashboard: heman10x-ngu.github.io/openJev-verdict-2.0.

Limites (leia antes de colocar em produção)

• Toda comparação de destaque vs Jev / Laya (acurácia, Brier, ECE, flip rate, “SOTA”) é relato do autor → UnverifiedClaim pesado. O ModelSystem.One não auditou suite, splits nem protocolo do baseline Jev.
• A história soft-label / dual-head pode não bater com a sua definição de correção em produção — ajuste gates nos seus rótulos.
• O tom de marketing do README é forte; use o card para orientação, não como scorecard de compra.

Por que está no catálogo

I/O aberto em escala de encoder no formato System One, com playground público, no mesmo cluster open que Laya — com higiene de claims mais estrita que o README.

Auditoria dos placares (17/10/2026)

publicado (OK do Fabricio 17/10 BRT). Conferido nos placares oficiais em 17/10/2026: Decision Index 0.3.2 (dados de 16/10, 19:00 UTC), JevBench e ImageJevBench ao vivo. Os placares são fontes separadas e nunca são combinados. Afirmações e posições antigas de placar mais abaixo nesta página ficam superadas quando conflitam com esta seção.

Placar	Linha	Resultado
Decision Index 0.3.2 (16 out 19:00 UTC)	Verdict	Full 0 (#171, grupo de empate 52); público 1,86 (#171); same-skills 2,41; new-domains 1,21
JevBench pesos abertos (ao vivo 17/10)	openJev Verdict 1.4	Capability 40,4; Intelligence 5,0; calibração 75,7; p50 0,293 s; US$ 0,0028/1k
JevBench pesos abertos (ao vivo 17/10)	openJev Verdict	Capability 26,6; Intelligence 4,1; calibração 49,1; p50 0,269 s; US$ 0,0028/1k

Atualização da nota (auditoria, 17/10/2026). Capability 6,9 → 5,5, primeira conta completa (a nota anterior não tinha detalhamento guardado) = tipos 10 × 0,30 + calibração 3 × 0,25 + latência 6 × 0,25 + acurácia 1 × 0,20 = 5,45 → 5,5. Tipos vêm de decisionTypes; calibração do eixo do JevBench 49,1 (≥90 → 7, 85–89,9 → 6, 75–84,9 → 5, 60–74,9 → 4, abaixo de 60 → 3; sem ECE do autor); latência do p50 self-hosted do placar 0,269 s, sem p99 (≤0,25 s → 7, ≤0,5 s → 6, ≤1 s → 5, acima → 3); acurácia JevBench Intelligence 4,1 ÷ 63,6 × 8 = 0,5, arredondado para cima. Maturidade e adoção inalteradas.