The league table for small open models.
Benchmark scores for every recent small open-weight model worth comparing — read them side by side, see where each one is cheapest to run, and filter down to the ones that fit your hardware.
- 1.5B–285B params
- Official weights only
- No quantized or finetuned re-uploads
- Released since 5 Apr 2026
- Current versions only
Changelog
- 6 Nov 2026Corrected Ornith-1.5-122B active parameters (10B active), fixing its decode-speed estimates.
- 2 Nov 2026Added Nanbeige/Nanbeige4.3-33B; estimated decode speed, a Speed preset and sticky Models headers.
- 28 Oct 2026v2 redesign: core heatmap, shareable filters, KV-cache column, HLE/IFBench scatter presets; added Spark-X2.6-1.7B, dropped KAT-Coder.
- 27 Oct 2026Added LiquidAI/LFM3-1.7B; lowered the param floor to 1.5B.
- 22 Oct 2026Added Sage-A1.5, GPQA/Terminal-Bench scatter charts, and τ²/τ³-bench scores.
- 20 Oct 2026Added XHToken/Spark-X2.6-4B (4.1B dense) and dropped the superseded Spark-X2.5-4B. Added ornith-ai/Ornith-1.5-122B (125B MoE, 8B active, vision) and LiquidAI/LFM2.5-24B-A2B (24B MoE, 2B active). Removed the two oldest entries, Nemotron-3-Nano-Omni-30B-A3B-Reasoning and tencent/Hy-MT2-30B-A3B. The coverage heatmap now hides benchmark columns with fewer than two entries as soon as a filter is applied.
- 15 Oct 2026Added nvidia/NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-BF16 and nvidia/NVIDIA-Nemotron-3.5-Bolt-74B-A9B-BF16. Re-based the AA Intelligence Index on v4.3.2 and re-fetched every model.
- 12 Oct 2026Added openbmb/MiniCPM-V-4.7-35B-A3B (35.2B MoE, vision) — first open-source on-device MoE VLM. Scores from the model card's eval figures (instruct, 4x visual-token compression).
- 14 Sept 2026Added IFM/K2-Horizon-3.7B. All K2 Horizon models are now on Artificial Analysis: added the AA Intelligence Index (v4.3) to K2-Horizon-3.7B (16), K2-Horizon-7B (21) and K2-Horizon-MoVA-36B-A4B (26).
- 13 Sept 2026Fixed duplicate benchmark scores (highest shown, conflicts logged), AA fetcher matching, and vision/param detection for new models.
- 12 Sept 2026Added Agnes-AI/Agnes-3.0-Flash (33.1B dense, vision). Added a License column to the Models table.
- 10 Sept 2026Added inclusionAI/Ling-3.0-flash-VL (124.8B MoE, vision) and meta-models/Muse-Glimmer-30B (29.8B dense, vision).
- 9 Sept 2026Added nex-agi/Nex-N2.5-mini (35.1B MoE, vision). Added a model filter. Fixed the mobile layout (tables now scroll horizontally, heatmap keeps the model column pinned).
- 8 Sept 2026Removed the Fara family (and JetBrains/Mellum2-12B); benchmark columns now show specific versions, grouped by family.
- 7 Sept 2026Added openbmb/MiniCPM5-2B (2.5B dense), IFM K2-Horizon-MoVA-36B-A4B (36B MoE, 4B active) and K2-Horizon-7B (9B dense).
- 4 Sept 2026Initial release with 26 open-weight models.
Models 36
Newest first. Click any header to sort; click again to flip. Active is the parameters a model uses per token (dense models use all of them); Context is its native maximum; Benchmarks is how many it reports. KV @128K is the cache needed to hold a 128K-token context (BF16, one sequence) — derived from the model's config.json and verified against the released weights, so it is a hardware cost, not a benchmark. Hover for the per-token rate. Decode fresh and Decode @128K are estimated single-stream output speeds on one NVIDIA RTX 4090 at half its 1008 GB/s bandwidth — before and after the KV read at 128K, memory-bandwidth bound. The sub-line is the share of fresh-context speed retained. Both are estimates, not measurements.
| Model | Params | Active | Context | KV @128K | Decode fresh | Decode @128K | Type | License | Released | Benchmarks |
|---|---|---|---|---|---|---|---|---|---|---|
| LFM3-1.7B | 1.7B | — | 262K | 1.50 GiB | 148 tok/s | 101 tok/s68% kept | dense | other | 2026-10-27 | 27 |
| Nanbeige4.3-33B | 33.1B | — | 524K | 26.0 GiB | 7.6 tok/s | 5.4 tok/s70% kept | dense | Apache 2.0 | 2026-10-24 | 20 |
| Spark-X2.6-4B | 4.1B | — | 1M | 4.55 GiB | 62 tok/s | 39 tok/s63% kept | dense | Apache 2.0 | 2026-10-19 | 27 |
| Spark-X2.6-1.7B | 1.7B | — | 1M | 1.77 GiB | 148 tok/s | 96 tok/s64% kept | dense | Apache 2.0 | 2026-10-19 | 27 |
| Ornith-1.5-122BVMoE | 125.1B | 10B | 262K | 3.00 GiB | 25 tok/s | 22 tok/s86% kept | moe | MIT | 2026-10-16 | 13 |
| Sage-A1.5VMoE | 36B | 3B | 262K | 2.50 GiB | 84 tok/s | 58 tok/s69% kept | moe | Apache 2.0 | 2026-10-15 | 22 |
| NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-BF16VMoE | 124.5B | 12B | 1M | 1.00 GiB | 21 tok/s | 20 tok/s96% kept | moe | other | 2026-10-12 | 36 |
| LFM2.5-24B-A2BMoE | 24B | 2B | 131K | 2.50 GiB | 126 tok/s | 75 tok/s60% kept | moe | other | 2026-10-12 | 16 |
| NVIDIA-Nemotron-3.5-Bolt-74B-A9B-BF16VMoE | 74.9B | 9B | 262K | 1.00 GiB | 28 tok/s | 26 tok/s94% kept | moe | other | 2026-10-09 | 17 |
| MiniCPM-V-4.7-35B-A3BVMoE | 35.2B | 3B | 262K | 2.50 GiB | 84 tok/s | 58 tok/s69% kept | moe | Apache 2.0 | 2026-10-07 | 33 |
| Agnes-3.0-FlashV | 33.1B | — | 262K | 9.00 GiB | 7.6 tok/s | 6.6 tok/s87% kept | dense | Apache 2.0 | 2026-09-11 | 5 |
| Nex-N2.5-miniVMoE | 35.1B | — | 262K | 2.50 GiB | 7.2 tok/s | 6.9 tok/s96% kept | moe | Apache 2.0 | 2026-09-08 | 16 |
| MiniCPM5-2B | 2.5B | — | 131K | 5.25 GiB | 101 tok/s | 47 tok/s47% kept | dense | Apache 2.0 | 2026-09-06 | 33 |
| K2-Horizon-MoVA-36B-A4BMoE | 37.4B | 4B | 524K | 24.0 GiB | 63 tok/s | 15 tok/s24% kept | moe | Apache 2.0 | 2026-09-01 | 9 |
| K2-Horizon-7B | 9B | — | 524K | 18.0 GiB | 28 tok/s | 14 tok/s48% kept | dense | Apache 2.0 | 2026-09-01 | 8 |
| K2-Horizon-3.7B | 5.1B | — | 524K | 18.0 GiB | 49 tok/s | 17 tok/s34% kept | dense | Apache 2.0 | 2026-09-01 | 8 |
| Qwen3.8-Flash-NextVMoE | 180B | 6B | 262K | 3.00 GiB | 42 tok/s | 33 tok/s79% kept | moe | other | 2026-08-24 | 23 |
| Ornith-1.5-9BV | 9.7B | — | 262K | 4.00 GiB | 26 tok/s | 21 tok/s82% kept | dense | MIT | 2026-08-18 | 13 |
| Ornith-1.5-35B-A3BVMoE | 36B | 3B | 262K | 2.50 GiB | 84 tok/s | 58 tok/s69% kept | moe | MIT | 2026-08-18 | 15 |
| Ling-3.0-tinyMoE | 7.9B | 1.3B | 131K | 0.84 GiB | 194 tok/s | 144 tok/s74% kept | moe | MIT | 2026-08-10 | 17 |
| Muse-Glimmer-30BV | 29.8B | — | 131K | 1.70 GiB | 8.5 tok/s | 8.2 tok/s97% kept | dense | Apache 2.0 | 2026-08-09 | 27 |
| granite-4.2-30b | 29.3B | — | 131K | 32.0 GiB | 8.6 tok/s | 5.4 tok/s63% kept | dense | Apache 2.0 | 2026-08-07 | 19 |
| granite-4.2-8b | 8.8B | — | 131K | 20.0 GiB | 29 tok/s | 13 tok/s45% kept | dense | Apache 2.0 | 2026-08-07 | 19 |
| Qwen3.8-27BV | 27.8B | — | 262K | 8.00 GiB | 9.1 tok/s | 7.9 tok/s87% kept | dense | Apache 2.0 | 2026-08-05 | 26 |
| Ling-3.0-flashMoE | 127.5B | 5.1B | 262K | 0.98 GiB | 49 tok/s | 45 tok/s91% kept | moe | MIT | 2026-08-02 | 25 |
| NVIDIA-Nemotron-3.5-Lightning-30B-A3B-BF16MoE | 31.6B | 3B | 262K | 0.75 GiB | 84 tok/s | 74 tok/s88% kept | moe | other | 2026-08-01 | 14 |
| LongCat-Flash-Lite-SparseMoE | 69.1B | 3B | 983K | 3.94 GiB | 84 tok/s | 49 tok/s59% kept | moe | MIT | 2026-07-31 | 29 |
| Nanbeige4.2-3B | 4.2B | — | 262K | 22.0 GiB | 60 tok/s | 16 tok/s26% kept | dense | Apache 2.0 | 2026-07-21 | 21 |
| Laguna-S-2.1MoE | 117.6B | 8B | 1M | 6.07 GiB | 32 tok/s | 22 tok/s71% kept | moe | openmdw-1.1 | 2026-07-13 | 6 |
| DeepSeek-V4-Flash-DSparkMoE | 284B | 13B | 1M | 0.68 GiB | 19 tok/s | 19 tok/s97% kept | moe | MIT | 2026-06-27 | 22 |
| Qwen-AgentWorld-35B-A3BVMoE | 34.7B | 3B | 262K | 2.50 GiB | 84 tok/s | 58 tok/s69% kept | moe | Apache 2.0 | 2026-06-22 | 1 |
| Laguna-XS-2.1MoE | 33.4B | 3B | 262K | 5.06 GiB | 84 tok/s | 44 tok/s53% kept | moe | openmdw-1.1 | 2026-06-20 | 4 |
| diffusiongemma-26B-A4B-itVMoE | 25.8B | 4B | 262K | 2.69 GiB | 63 tok/s | 47 tok/s75% kept | moe | Apache 2.0 | 2026-06-09 | 14 |
| North-Mini-Code-1.0MoE | 30.5B | 3B | 500K | 3.53 GiB | 84 tok/s | 53 tok/s63% kept | moe | Apache 2.0 | 2026-06-05 | 11 |
| LFM2.5-8B-A1BMoE | 8.5B | 1.5B | 128K | 1.47 GiB | 168 tok/s | 110 tok/s66% kept | moe | other | 2026-05-28 | 12 |
| gemma-4-12B-itV | 12B | — | 262K | 2.31 GiB | 21 tok/s | 19 tok/s92% kept | dense | Apache 2.0 | 2026-05-23 | 16 |
Scores heatmap 95 benchmarks
How to read this
Each cell is one model×benchmark score. Colour is scaled within a column (pale → deep = lower → higher), so each benchmark is read on its own scale; the medal cell is the best model on that benchmark. A column is only shown when at least two models report that exact benchmark — versions are never pooled. The Core view keeps the benchmarks with 5+ models; All shows every column. Click a header to rank models by it.
| Model | τ³-bench21 | τ²-bench10 | Terminal-Bench2.120 | Terminal-Bench2.05 | Terminal-Bench43 | GPQA Diamond26 | HLE25 | SWE-bench Pro22 | SciCode21 | IFBench20 | SWE-bench Verifi…20 | AA-LCR17 | SWE-bench Multil…17 | AIME202611 | AIME20254 | BrowseComp15 | LiveCodeBenchv612 | BFCLv412 | HMMTFeb 202610 | HMMTFeb 20252 | MCP-Atlas12 | MMLU-Pro9 | ClawEval8 | AA-Omniscience A…7 | DeepSWE4 | DeepSWE1.13 | IMO AnswerBench7 | MRCRv24 | MRCR3 | GDPval-AA-V26 | IFEval6 | MathVision6 | Multi-IF6 | NL2Repo-Bench6 | AA-Omniscience I…5 | AA-Omniscience N…5 | CharXiv5 | CritPt4 | EnterpriseOps-Gy…4 | GDPval4 | JobBench4 | LongBench-v24 | MATH5004 | MMMU Pro4 | OSWorld-Verified4 | OmniDocBench 1.54 | PinchBench4 | SWE Atlas4 | Toolathlon4 | Toolathlon-Verif…4 | WebArena-Verifie…4 | WideSearch4 | Agents' Last Exa…3 | AutomationBench3 | Codeforces ELO3 | GDPval-AA3 | GraphWalks3 | GraphWalks Exten…3 | RULER3 | SkillsBench3 | Vision2Web3 | AndroidWorld2 | Apex Shortlist2 | Arena-Hard-V22 | ArtifactsBench2 | BabyVision2 | BigBench Extra H…2 | BirdBench2 | BrowseComp-zh2 | CMMLU2 | Claw-Gym2 | ClawEval-MM2 | CoWorkBench2 | DeepResearch Ben…2 | ERQA2 | GAIA2 | GDP.pdf2 | Gaokao 20262 | LIFEbench2 | LiveClaw2 | LiveCodeBench Pro25Q22 | MMLU-ProX lite2 | MMMLU2 | MedXPertQA MM2 | OCRBench 22 | PAgentBench2 | ProfBench2 | RealWorldQA2 | RecreationBench2 | SWE-MM2 | SWebBench2 | SuperGPQA2 | ToolSandbox2 | VitaBench2 | VitaBench2.02 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Qwen3.8-27BV | 48.0 | · | 73 | · | · | 89.2 | 30.8 | 61.7 | · | 79.5 | · | · | · | · | · | · | 90.3 | · | · | · | · | · | · | · | · | 42.2 | · | · | · | · | · | 94.6 | · | 42.3 | · | · | 90.2 | · | · | · | 33.4 | · | · | · | 84.3 | 91.1 | · | · | · | · | 64.8 | · | 42.9 | · | · | · | · | · | · | · | 62.9 | 81.9 | · | · | · | 85.6 | · | · | · | · | · | 57.4 | 70.7 | · | 65.5 | · | · | · | · | · | · | · | · | · | · | · | · | 85.9 | 47.1 | 38.6 | · | · | · | · | · |
| Qwen3.8-Flash-NextVMoE | 45.4 | · | · | · | · | 91.7 | 35.9 | 62.5 | · | 81.3 | · | · | 81 | · | · | · | 91.9 | · | · | · | · | · | · | · | · | 58.7 | · | · | · | · | · | 95.7 | · | 48.1 | · | · | 90.6 | · | · | · | 55.7 | · | · | · | · | · | · | · | 73.5 | · | · | · | 51.2 | · | · | · | · | · | · | · | 64 | 84.5 | · | · | · | · | · | · | · | · | · | 64.4 | 73.9 | · | 72.3 | · | · | · | · | · | · | · | · | · | · | · | · | 88.5 | 49.9 | · | · | · | · | · | · |
| Qwen-AgentWorld-35B-A3BVMoE | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| gemma-4-12B-itV | · | 69 | · | · | · | 78.8 | 5.2 | · | · | · | · | · | · | 77.5 | · | · | 72 | · | · | · | · | 77.2 | · | · | · | · | · | 43.4 | · | · | · | 79.7 | · | · | · | · | · | · | · | · | · | · | · | 69.1 | · | 0.2 | · | · | · | · | · | · | · | · | 1659 | · | · | · | · | · | · | · | · | · | · | · | 53 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 83.4 | 48.7 | · | · | · | · | · | · | · | · | · | · | · |
| diffusiongemma-26B-A4B-itVMoE | · | 56.2 | · | · | · | 73.2 | 11.9 | · | · | · | · | · | · | 69.1 | · | · | 69.1 | · | · | · | · | 77.6 | · | · | · | · | · | 32 | · | · | · | 70.5 | · | · | · | · | · | · | · | · | · | · | · | 54.3 | · | 0.3 | · | · | · | · | · | · | · | · | 1429 | · | · | · | · | · | · | · | · | · | · | · | 47.6 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 81.5 | 49 | · | · | · | · | · | · | · | · | · | · | · |
| DeepSeek-V4-Flash-DSparkMoE | 39.4 | · | · | 56.9 | · | 88.1 | 45.1 | 52.6 | · | · | 79 | · | 73.3 | · | · | 73.2 | · | · | 94.8 | · | 69 | 86.2 | · | · | · | · | 88.4 | · | 78.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 47.8 | · | · | · | · | · | 3052 | 1395 | · | · | · | · | · | · | 85.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Laguna-S-2.1MoE | · | · | 70.2 | · | · | · | · | 59.4 | · | · | · | · | 78.5 | · | · | · | · | · | · | · | · | · | · | · | 40.4 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 46.2 | 49.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Laguna-XS-2.1MoE | · | · | · | 37.5 | · | · | · | 47.6 | · | · | 70.9 | · | 63.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| LFM2.5-8B-A1BMoE | · | 88.1 | · | · | · | · | · | · | · | 56.5 | · | · | · | 50 | 42.5 | · | · | 49.7 | · | · | · | · | · | 8.7 | · | · | · | · | · | · | 91.8 | · | 79.9 | · | -24.7 | 63.5 | · | · | · | · | · | · | 88.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Nanbeige4.2-3B | · | · | · | 44.1 | · | 87.4 | 17.8 | 46.9 | 35.6 | 54.6 | 63.6 | 58.7 | · | · | · | · | 72.5 | · | 82.8 | · | 57.8 | · | 52.2 | · | · | · | 67.3 | · | · | · | · | · | · | · | · | · | · | · | · | 74.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 65 | · | · | 33.4 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| North-Mini-Code-1.0MoE | 6.4 | 37.4 | · | 36 | · | 75.7 | 11.1 | 40.2 | 38.2 | 57.5 | 67.6 | · | · | · | · | · | 70.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| granite-4.2-30b | 62 | · | 29.2 | · | · | 66.4 | · | 33.3 | 38.8 | 77.2 | 57 | · | 41.9 | · | 89.2 | · | 75.8 | 61.4 | · | 89.2 | · | 77.6 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 1225 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 90.0 | · | · | · | · | 67.9 | · | · | · | 41.9 | · | · | · | · | · | · | · | · | · | · | · | · | · | 66.6 | · | · | · | · | 42.9 | · | · | · | · | · | · | · | · |
| granite-4.2-8b | 58.1 | · | 20.6 | · | · | 64.1 | · | 19.1 | 36.1 | 79.3 | 47.7 | · | 30.8 | · | 86.7 | · | 73.2 | 52.4 | · | 78.3 | · | 74.0 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 1189 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 81.0 | · | · | · | · | 65.2 | · | · | · | 41.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | 61.1 | · | · | · | · | 41.2 | · | · | · | · | · | · | · | · |
| LongCat-Flash-Lite-SparseMoE | · | 96.0 | · | 33.7 | · | 69.5 | · | 40.6 | · | · | 68.2 | 48 | 59.3 | 65.7 | · | 48.6 | · | · | 41.5 | · | 45.6 | 79.2 | · | · | · | · | 49.4 | · | 44.7 | · | · | · | · | · | · | · | · | · | · | · | · | 53.6 | 96.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 66.3 | · | · | · | · | · | · | · | · | · | · | 61.9 | 84.5 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 21.7 | · |
| NVIDIA-Nemotron-3.5-Lightning-30B-A3B-BF16MoE | 9.3 | · | 24.6 | · | · | 75.4 | 11.7 | · | 32.6 | 71.9 | 51.6 | 52 | 39.3 | · | · | 37.0 | · | · | · | · | · | 81.9 | · | · | · | · | · | · | · | 832 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 85.4 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Ornith-1.5-9BV | · | · | 47 | · | · | 86.4 | 30.5 | 47.5 | · | · | 70.6 | · | 54.4 | · | · | 56.4 | · | · | · | · | 54.2 | · | 66.5 | · | · | · | · | · | · | · | · | · | · | 32.4 | · | · | · | · | · | · | · | · | · | · | · | · | · | 20.6 | · | 41.2 | · | 59.5 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Ornith-1.5-35B-A3BVMoE | · | · | 68.5 | · | · | 89.2 | 33.4 | 59.6 | · | · | 79 | · | 71.4 | · | · | 67.6 | · | · | · | · | 70.2 | · | 72.5 | · | 22 | · | · | · | · | · | · | · | · | 46.2 | · | · | · | · | · | · | · | · | · | · | · | · | · | 39.8 | 48.7 | · | · | 67.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Ling-3.0-tinyMoE | 20.8 | · | 27.7 | · | · | 73.4 | 9.3 | · | 24.2 | 63.6 | · | 58.7 | · | · | · | · | · | 62.7 | 70.3 | · | · | · | · | 8.5 | · | · | 71.0 | · | · | · | · | · | 83.2 | · | · | 69.5 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 772 | · | · | · | · | · | · | · | · | 47.9 | · | · | · | · | · | · | · | · | · | · | · | · | · | 62.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Ling-3.0-flashMoE | 28 | · | 57 | · | · | · | 22.7 | 56.6 | · | 74.5 | · | 65.1 | 72.4 | 93.2 | · | 82 | · | 73 | 87 | · | 65.5 | · | · | · | · | · | 83.7 | · | 90.8 | · | · | · | 87.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 73.6 | · | · | · | 1107 | · | · | · | 44.8 | · | · | · | · | 77 | · | · | · | · | · | · | · | · | · | · | · | · | · | 77.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| K2-Horizon-MoVA-36B-A4BMoE | 26.8 | · | 58.6 | · | · | 80.8 | 25.2 | · | 38.9 | · | · | 66.3 | · | · | · | · | · | · | · | · | · | · | · | 18.8 | · | · | · | · | · | · | · | · | · | · | · | 69.2 | · | 2.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| K2-Horizon-7B | 25.8 | · | 39.1 | · | · | · | 18.6 | · | 31.6 | · | 70.6 | 68 | · | · | · | 59 | · | · | 73.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| MiniCPM5-2B | 20.8 | 97.1 | 8.6 | · | · | 70.2 | 8.9 | 14.4 | 26.3 | 66.3 | 46.4 | 59 | · | 86.5 | 86.5 | 39.7 | 69.1 | 66.6 | 63.8 | · | · | 70.8 | · | · | · | · | · | · | · | 19.6 | 86.7 | · | 71.8 | · | · | · | · | · | · | · | · | 43.7 | 94.6 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 43.5 | · | 59.2 | · | · | · | · | 88.7 | · | · | · | · | 68 | · | · | · | · | · | · | · | · | · | · | 40.8 | · | · | · |
| Nex-N2.5-miniVMoE | · | · | 73.4 | · | · | · | · | 43.8 | · | · | · | · | · | · | · | 83.4 | · | · | · | · | · | · | · | · | · | 36.1 | · | · | · | 1446 | · | · | · | · | · | · | · | · | · | · | 28.5 | · | · | · | 71.2 | · | · | · | · | 54.6 | 63.4 | · | · | · | · | · | · | · | · | · | 52.9 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 25.5 | · | · | · | · | · |
| Muse-Glimmer-30BV | 23.5 | · | 51.7 | · | · | 83.5 | 22 | 51.2 | 43.6 | 77 | 76 | 80 | · | 94.7 | · | · | · | · | · | · | 75.5 | · | · | · | · | · | · | · | · | 953 | · | · | · | · | · | · | 78.8 | · | · | · | · | · | · | 74 | 65.9 | 75.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | 44.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Agnes-3.0-FlashV | · | · | · | · | · | 85.0 | · | · | 38.1 | 74.2 | · | 68.3 | · | · | · | · | · | · | · | · | · | · | · | 23 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| K2-Horizon-3.7B | 17.7 | · | 25.1 | · | · | 65.4 | 12.9 | · | 25.9 | · | 68.6 | · | · | · | · | · | · | 50.9 | 70.5 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| MiniCPM-V-4.7-35B-A3BVMoE | · | 84.7 | · | · | · | · | · | · | · | 47.7 | · | · | · | 76.5 | · | · | 56.6 | 60.1 | · | · | · | 83.5 | · | · | · | · | · | · | · | · | · | 74.2 | · | · | · | · | 75.6 | · | · | · | · | · | · | 69.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 90.2 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 68.5 | · | · | · | · | · | · | 61.2 | · | · | · |
| NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-BF16VMoE | 18.9 | 73.2 | 66.7 | · | 1 | 89.5 | 31.8 | 51.8 | 47.1 | 70.9 | 71.1 | 68.6 | 67.7 | · | · | 78 | 88.2 | · | · | · | · | · | · | 26.2 | 24.6 | · | · | · | · | 1211 | · | 78.2 | · | · | 4.0 | · | 80.8 | 10.9 | · | · | · | · | · | · | 51.1 | · | · | · | · | · | · | · | · | · | · | · | 89.7 | · | · | · | · | · | 88.4 | · | · | 29.6 | · | · | · | · | · | · | · | · | · | · | 6.6 | · | · | · | · | · | · | · | 68.1 | · | · | · | · | · | · | · | · | · | · |
| NVIDIA-Nemotron-3.5-Bolt-74B-A9B-BF16VMoE | 17.0 | · | 53.9 | · | 0 | 88.8 | 28.7 | · | 44.5 | · | · | 67.4 | · | · | · | 70 | · | · | · | · | 55.6 | · | · | 21.8 | · | · | · | · | · | 979.0 | · | · | · | · | -19.2 | 56.1 | · | 4.3 | · | · | · | · | · | · | · | · | 90.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 2.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| Spark-X2.6-4B | 34.7 | 86.9 | · | · | · | 77.1 | 17.9 | 54.3 | 36.8 | 75.8 | 62.8 | 67.3 | 64.7 | 91.2 | · | 53.1 | · | 71.8 | 81.3 | · | 62.4 | · | 69.9 | · | · | · | 75.2 | 65.6 | · | · | 93.6 | · | · | · | · | · | · | · | 33.6 | · | · | 53.3 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 92.2 | 34.2 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 134.9 | · | · | · | · | · | · | · | 74.1 | · | · | · | · | 71.7 | · | · | · | 30.8 |
| Ornith-1.5-122BVMoE | · | · | 81.2 | · | · | · | 48 | 76.9 | 53.8 | · | 84.5 | · | 76.4 | · | · | 78.5 | · | · | · | · | 74.6 | · | 79.4 | · | · | · | · | · | · | · | · | · | · | 51.2 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 70.8 | · | 75.2 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
| LFM2.5-24B-A2BMoE | 8.0 | · | · | · | · | 74.4 | 7.4 | · | 32.7 | 74.7 | 51 | · | · | · | · | · | · | 65.0 | · | · | · | · | · | · | · | · | · | · | · | · | 96.8 | · | 84.4 | · | -24.9 | · | · | · | · | · | · | · | 96.0 | · | · | · | 83.2 | · | · | · | 26.8 | · | · | 27.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 48.1 | · | · | · | · | · | · | · | · | · | · | · | · | 80.7 | · | · |
| Sage-A1.5VMoE | · | · | · | · | · | · | 55.1 | 61.2 | 44.3 | 81.6 | · | 81 | 72.7 | · | · | 82.8 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 20 | · | · | · | · | · | · | · | · | 90 | · | · | · | · | · | 19.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 47.5 | · | 95.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 45.4 | · |
| LFM3-1.7B | 68.0 | · | 12.9 | · | · | 63.4 | 7.2 | · | 28.5 | 73.0 | 43.4 | 52.8 | 23 | · | · | · | 73.5 | 71.4 | · | · | 32.6 | · | 68.6 | 7.1 | · | · | · | · | · | · | 96.7 | · | 89.1 | · | 0.5 | 92.9 | · | · | 28.2 | · | · | · | · | · | · | · | · | · | · | · | 38.4 | · | · | 41.3 | · | · | · | · | 65.6 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 45.6 | 31.7 | · | · | · | · | · | · | · | · | · | · | · | 80.4 | · | · |
| Spark-X2.6-1.7B | 21.3 | 85.3 | · | · | · | 56.1 | 8.7 | 26.7 | 20.1 | 65.5 | 59.8 | 48 | 57.3 | 70.1 | · | 41.7 | · | 55.2 | 48.8 | · | 41.8 | · | 66.9 | · | · | · | 47.1 | 56.1 | · | · | 89.4 | · | · | · | · | · | · | · | 26.1 | · | · | 40.4 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 85.1 | 25.7 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | 118.9 | · | · | · | · | · | · | · | 58.8 | · | · | · | · | 53.9 | · | · | · | 22.6 |
| Nanbeige4.3-33B | 48.8 | · | 80.9 | · | 23.8 | 89.5 | · | 60.3 | 52.6 | · | · | 84 | · | 95.2 | · | · | · | · | · | · | · | · | 78.3 | · | 65.5 | · | · | · | · | · | · | · | · | 53 | · | · | · | · | 41 | 84.8 | 44.8 | · | · | · | · | · | · | 50.8 | · | 70.4 | · | · | · | 54.2 | · | · | · | · | · | 61.1 | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · | · |
Scatter one chart at a time
Pick a preset, or Custom to plot any two metrics against each other. The chart follows the filters, so it always shows the models currently in view. Hover a point for its values; click to open the model card.
Comparisons 48 benchmark charts
A leaderboard per benchmark: the top 10 models reporting it are drawn when at least four do, within the current filters. Bars are sorted and labelled, and the leader is filled in solid.