Decision 2B
Notas do quadrante
Ver o quadrante completoPontuação pela rubrica pública do quadrante (maturidade × capability; bolha = adoção). Revisamos conforme a evidência.
- Maturidade4.5/10
Pacote de avaliação completo com harness reproduzível, mas status preview e licença EVALUATION-PERMISSION restringem uso comercial; não é release de produção.
- Capability5.8/10
Placares oficiais (22/10): Decision Index 0.4.1 Full 39,80 (#122) para o Decision 4B v1.6 da FlyMy (o placar não tem linha da 2B); JevBench Intelligence 22,9, calibração 86,8, p50 0,075 s.
- Adoção12/100
Início da onda open-jev; licença evaluation-only e status preview limitam adoção a pesquisadores de benchmark e builders de modelos.
Vendor claims
- Subset público JevBench 75.32% de acurácia (Easy 100%, Standard 83.33%, Hard 59.46%) — não é rank oficial[Claim do fornecedor — não verificado independentemente]
- LoRA adapter + structural-token rows + pointer head em MiniCPM5-2B (2.27B params, 26M treinados)[Claim do fornecedor — não verificado independentemente]
- Latência local p50/p95 de 83.38/86.91ms em RTX4090 (encoding+forward+calibration, não HTTP)[Claim do fornecedor — não verificado independentemente]
- Pico VRAM 4.83 GiB, pico RSS 5.08 GiB com zero crescimento de memória após 128 requests[Claim do fornecedor — não verificado independentemente]
publicado (OK do Fabricio 17/10 BRT). Auditoria dos placares de 17/10/2026: veja a seção “Auditoria dos placares” abaixo; onde ela conflita com afirmações antigas de placar nesta página, ela vale.
Decision 2B é um preview de avaliação da FlyMy.AI (@denti) — LoRA adapter + pointer head em MiniCPM5-2B congelado — não é produto TypeSafe, não é release de produção, e não é o mesmo que Decider-2B (fine-tune completo do Qwen3.5-2B da Mapika).
Retorna probabilidades nativas de decisão (choice, score, noul → boolean no catálogo) via softmax do pointer-head — sem tokens gerados, sem parsing de logprobs. Checkpoint: minicpm5_reduced_v16_4k_v59. Pesos: flymy-ai/decision-2b-preview. Irmão: Decision Fast (0.6B small-model track).
Resultados JevBench v1.4.2
| Métrica | Valor |
|---|---|
| Score Geral | 35.8 (#25) |
| Inteligência | 38.8 |
| Calibração | 74.1 |
| Velocidade | 84.3 |
| Custo | 62.5 (~$0.018/1k) |
Subset público medido pelo autor (não é rank oficial do JevBench): 75.32% overall — Easy 100%, Standard 83.33%, Hard 59.46%.
Limites (leia antes de colocar em produção)
- Apenas preview de avaliação —
EVALUATION-PERMISSION.mdpermite avaliação de benchmark; licença comercial geral dos pesos não é declarada. - Benches medidos pelo autor (subset público JevBench) são self-reported — não são evals do ModelSystem.One; claims de comparação são UnverifiedClaim.
- Notas de proveniência não resolvidas: 96 registros derivados de Gigaword, 543 registros sintéticos
claude-fable-5-1com entitlement upstream incerto. - Limite de 4096 tokens; textos longos de state podem truncar. Máximo 255 opções por request.
- Não coloque isso numa lista de produção sem revisar EVALUATION-PERMISSION e fazer sua própria eval rotulada.
Não é o Decider-2B
Este modelo é diferente do Decider-2B da Mapika:
| Decision 2B (FlyMy.AI) | Decider-2B (Mapika) | |
|---|---|---|
| Base | MiniCPM5-2B | Qwen3.5-2B |
| Método | LoRA + pointer head | Fine-tune completo + RL calib |
| Status | Preview de avaliação | Release aberto |
| Licença | EVALUATION-PERMISSION | Open padrão |
Por que está no catálogo
Arquitetura pública de decisão com pointer head, reprodução documentada do JevBench, disclosure explícito de proveniência, e medições de memória/latência. Demonstra MiniCPM5 como backbone viável para decision-model — útil para builders explorando arquiteturas além de Qwen.
Release mais nova da FlyMy: Decision 4B v1.6 (11/10/2026)
O flymy-ai/decision-4b-v1.6 (“FlyMyJev-4B”) é um LoRA (rank 16) sobre o Qwen3.5-4B que lê os logits das letras das opções, com temperaturas por tipo de pergunta. Diferente do preview 2B, é Apache-2.0. Aceita até 676 opções e entradas de 131.072 tokens e traz um servidor /v1/systemone que os adaptadores do JevBench e do kit do Decision Index conseguem usar. Números da FlyMy (UnverifiedClaim): JevBench público hard 76,6 (85/111), standard 100, easy 100, ou seja 205/231 no total, igual ao v1.5; p50 de 18,3 ms por decisão curta numa RTX 4090. Fora de placares. As notas desta ficha são do preview 2B e não mudam; o v1.6 é candidato a ficha própria.
Auditoria dos placares (17/10/2026)
publicado (OK do Fabricio 17/10 BRT). Conferido nos placares oficiais em 17/10/2026: Decision Index 0.3.2 (dados de 16/10, 19:00 UTC), JevBench e ImageJevBench ao vivo. Os placares são fontes separadas e nunca são combinados. Afirmações e posições antigas de placar mais abaixo nesta página ficam superadas quando conflitam com esta seção.
| Placar | Linha | Resultado |
|---|---|---|
| Decision Index 0.3.2 (16 out 19:00 UTC) | FlyMy.AI Decision 4B v1.6 | Full 43,65 (#85, grupo de empate 20); público 42,7 (#88); same-skills 43,09; new-domains 40,49 |
| JevBench pesos abertos (ao vivo 17/10) | Decision 2B | Capability 54,8; Intelligence 22,9; calibração 86,8; p50 0,075 s; US$ 0,013/1k |
| JevBench pesos abertos (ao vivo 17/10) | Decision 4B v1.2 | Capability 60,4; Intelligence 32,4; calibração 88,4; p50 0,019 s; US$ 0,017/1k |
| JevBench pesos abertos (ao vivo 17/10) | Decision 4B v1.1 | Capability 57,2; Intelligence 29,1; calibração 85,2; p50 0,019 s; US$ 0,017/1k |
| JevBench pesos abertos (ao vivo 17/10) | Decision-4B | Capability 59,1; Intelligence 37,9; calibração 80,3; p50 0,047 s; US$ 0,014/1k |
Atualização da nota (auditoria, 17/10/2026). Capability 5,8 → 6 = tipos × 0,30 + calibração × 0,25 + latência × 0,25 + acurácia × 0,20 = 6,8 × 0,30 + 7 × 0,25 + 4 × 0,25 + 6 × 0,20 = 5,99 → 6,0. Tipos, calibração e latência vêm da conta anterior (6,8 / 7 / 4); só a acurácia é refeita pelo placar (6; era 5): Decision Index Full 43,65 ÷ 60,11 × 8 = 5,8, arredondado para cima. Maturidade e adoção inalteradas.
Hugging Face em 17/10 (flymy-ai/decision-2b-preview): 0 downloads, 0 likes, tag de licença nenhuma, última modificação 2026-09-23.
Auditoria de placar (20/10/2026, DI 0.4)
publicado (OK do Fabricio 20/10 BRT).
O Decision Index 0.4 (20/10; Full agora só com as partes privadas) lista FlyMy.AI Decision 4B v1.6 com Full 40,24 (#105); era 43,65 na edição 0.3.2, arquivada. Regra de acurácia, referência Jev 1.13 no DI 0.4 Full (61,26): 8 × 40,24 ÷ 61,26 = 5,25 → 5 (era 6). Capability = 6,8 × 0,30 + 7 × 0,25 + 4 × 0,25 + 5 × 0,20 = 5,79 → 5,8 (era 6,0). Demais subnotas, maturidade e adoção inalteradas.
Auditoria de placar (22/10/2026, DI 0.4.1)
publicado (OK do Fabricio 22/10 BRT).
O Decision Index 0.4.1 (22/10; referência Jev 1.13 Full 59,22, era 61,26 no 0.4) lista a linha desta ficha com Full 39,80 (#122). Regra de acurácia: 8 × 39,80 ÷ 59,22 = 5,38 → 5 (era 5). Capability inalterada. Maturidade e adoção inalteradas.