reflex
Notas do quadrante
Ver o quadrante completoPontuação pela rubrica pública do quadrante (maturidade × capability; bolha = adoção). Revisamos conforme a evidência.
- Maturidade4.7/10
LoRA público, serve local e demo WebGPU no browser; empacotamento de pesquisa sem SLA hosted mantém maturidade na faixa média.
- Capability6.9/10
Placares oficiais (22/10): Decision Index 0.4.1 Full 58,77 (#53) para o build 27B pmscr; JevBench Intelligence 30,9, calibração 87,0, p50 1,358 s. choice/score/noul; o caminho WebGPU 0.8B é menor e menos calibrado.
- Adoção15/100
Playground + LoRA no HF visíveis na onda de réplicas; ainda cedo e nicho de builders vs Jev hosted.
Vendor claims
- ~100ms para resposta multi-pergunta com state em cache (autor)[Claim do fornecedor — não verificado independentemente]
- ECE estilo MMLU ~0.039 após temperature fit em Qwen3.5-4B (autor)[Claim do fornecedor — não verificado independentemente]
- Playground WebGPU roda variante ~0.8B 100% no browser[Claim do fornecedor — não verificado independentemente]
publicado (OK do Fabricio 17/10 BRT). Auditoria dos placares de 17/10/2026: veja a seção “Auditoria dos placares” abaixo; onde ela conflita com afirmações antigas de placar nesta página, ela vale.
reflex é uma reconstrução aberta (LoRA + calibração) do contrato System One por kshetrajna12 — backbone padrão Qwen3.5-4B — não é TypeSafe e não é modelo frontier.
Passe state (texto/JSON; imagens no engine) + perguntas tipadas (choice, score, noul → boolean no catálogo) e receba distribuições sem decode de texto livre. O formato espelha POST /v1/systemone da TypeSafe para trocar base_url local. LoRA: kshetrajna12/reflex-qwen3.5-4b-lora; repo: github.com/kshetrajna12/reflex; playground: kshetrajna12.github.io/reflex.
Limites (leia antes de colocar em produção)
- Latência (~100ms cached) e ECE do autor são self-reported — não são benches do ModelSystem.One.
- A demo no browser usa caminho menor 0.8B; não assuma que a calibração do 4B transfere.
- Serve local / WebGPU — ok para demos, não é SLA de waitlist hosted.
- Não use thresholds que afetam pessoas sem a sua própria eval rotulada.
Por que está no catálogo
I/O tipado público, pesos LoRA abertos e demo real no browser. Peer open/local ao lado de Kev (artifactKind: lora-adapter) e abaixo do Jev hosted em adoção.
Auditoria dos placares (17/10/2026)
publicado (OK do Fabricio 17/10 BRT). Conferido nos placares oficiais em 17/10/2026: Decision Index 0.3.2 (dados de 16/10, 19:00 UTC), JevBench e ImageJevBench ao vivo. Os placares são fontes separadas e nunca são combinados. Afirmações e posições antigas de placar mais abaixo nesta página ficam superadas quando conflitam com esta seção.
| Placar | Linha | Resultado |
|---|---|---|
| Decision Index 0.3.2 (16 out 19:00 UTC) | reflex Qwen3.8-27B-FP8 (pmscr) | Full 54,72 (#48, grupo de empate 11); público 57,34 (#45); same-skills 57,39; new-domains 42,74 |
| JevBench pesos abertos (ao vivo 17/10) | reflex 4B | Capability 59,0; Intelligence 30,9; calibração 87,0; p50 1,358 s; US$ 0,017/1k |
| ImageJevBench v0.3.0 | Reflex 4B | Capability 53,3; Intelligence 27,4; calibração 79,3; p50 0,48 s; US$ 0,052/1k |
| ImageJevBench arquivo v0.1.5 (congelado) | Reflex 4B | Capability 73,5; Intelligence 63,3; calibração 83,7; p50 0,46 s; US$ 0,049/1k |
Atualização da nota (auditoria, 17/10/2026). Capability 6,8 → 6,7, primeira conta completa (a nota anterior não tinha detalhamento guardado) = tipos 10 × 0,30 + calibração 6 × 0,25 + latência 3 × 0,25 + acurácia 7 × 0,20 = 6,65 → 6,7. Tipos vêm de decisionTypes; calibração do eixo do JevBench 87,0 (≥90 → 7, 85–89,9 → 6, 75–84,9 → 5, 60–74,9 → 4, abaixo de 60 → 3; sem ECE do autor); latência do p50 self-hosted do placar 1,358 s, sem p99 (≤0,25 s → 7, ≤0,5 s → 6, ≤1 s → 5, acima → 3); acurácia Decision Index Full 54,72 ÷ 60,11 × 8 = 7,3, arredondado para cima. Maturidade e adoção inalteradas.
Hugging Face em 17/10 (kshetrajna12/reflex-qwen3.5-4b-lora): 245 downloads, 1 likes, tag de licença mit, última modificação 2026-09-20.
Auditoria de placar (20/10/2026, DI 0.4)
publicado (OK do Fabricio 20/10 BRT).
O Decision Index 0.4 (20/10; Full agora só com as partes privadas) lista reflex Qwen3.8-27B-FP8 (pmscr) com Full 58,94 (#46); era 54,72 na edição 0.3.2, arquivada. Regra de acurácia, referência Jev 1.13 no DI 0.4 Full (61,26): 8 × 58,94 ÷ 61,26 = 7,70 → 8 (era 7). Capability = 10 × 0,30 + 6 × 0,25 + 3 × 0,25 + 8 × 0,20 = 6,85 → 6,9 (era 6,7). Demais subnotas, maturidade e adoção inalteradas.
Auditoria de placar (22/10/2026, DI 0.4.1)
publicado (OK do Fabricio 22/10 BRT).
O Decision Index 0.4.1 (22/10; referência Jev 1.13 Full 59,22, era 61,26 no 0.4) lista a linha desta ficha com Full 58,77 (#53). Regra de acurácia: 8 × 58,77 ÷ 59,22 = 7,94 → 8 (era 8). Capability inalterada. Maturidade e adoção inalteradas.
