OpenRouter Provider Probe Runs
Per-model results from mise run openrouter-probe, run from a talos session
so egress is the pod’s — providers rate-limit by IP, so a pod result is the
prod-relevant one. Each section gives the run date, the egress banner, the
pre-run cost estimate, and the stderr summary table; one section per model,
and when a model is probed again the newer run goes on top of its section.
JSONL record files stay in the pod and are not committed. See
probe-openrouter-model for the how-to and
eblume/talos#183 for the
consumer issue.
qwen/qwen3.8-27b
qwen3.8-27b is the production TALOS_MODEL.
Run date: 2026-09-12
Egress: egress: http proxy :8092 — source IP 98.97.35.132 — API key: from env
Effort sweep (--reps 2)
Plan: 14 providers × 3 efforts × 2 reps = 84 calls, concurrency 3
Estimated spend: $0.6777
openrouter-probe (effort sweep)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ AkashML │ 28 │ 33 │ 38 │ 0 │ 0 │ 1359 │ 1528 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Alibaba │ 26 │ 42 │ 40 │ 0 │ 0 │ 2071 │ 2267 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Chutes │ 0 │ 0 │ 0 │ 0 │ 0 │ 2915 │ 3928 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Cloudfl… │ 25 │ 45 │ 40 │ 0 │ 0 │ 2323 │ 2648 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ CoreWea… │ 28 │ 36 │ 48 │ 0 │ 0 │ 1574 │ 1765 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Darkblo… │ 28 │ 28 │ 47 │ 0 │ 0 │ 1986 │ 2315 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Io Net │ 28 │ 33 │ 34 │ 0 │ 0 │ 4000 │ 7160 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Ionstre… │ 29 │ 46 │ 43 │ 0 │ 0 │ 1454 │ 5652 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Mancer 2 │ 24 │ 36 │ 48 │ 0 │ 0 │ 1933 │ 2256 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Novita │ 36 │ 24 │ 44 │ 0 │ 0 │ 2004 │ 5679 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Parasail │ 29 │ 43 │ 42 │ 0 │ 0 │ 1344 │ 1588 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Phala │ 29 │ 168 │ 284 │ 0 │ 0 │ 2188 │ 3450 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Reka │ 26 │ 31 │ 42 │ 0 │ 0 │ 2967 │ 3078 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Venice │ 33 │ 41 │ 100 │ 0 │ 0 │ 1527 │ 3674 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘Empty check (--empty-check --reps 5, effort low)
Plan: 14 providers × 1 efforts × 5 reps = 70 calls, concurrency 3
Estimated spend: $0.5648
openrouter-probe (empty-check)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ AkashML │ │ │ │ 0 │ 0 │ 1375 │ 1665 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Alibaba │ │ │ │ 0 │ 0 │ 1667 │ 2008 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Chutes │ │ │ │ 0 │ 0 │ 2415 │ 3332 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Cloudfl… │ │ │ │ 0 │ 0 │ 2315 │ 2988 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ CoreWea… │ │ │ │ 0 │ 0 │ 1383 │ 1504 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Darkblo… │ │ │ │ 0 │ 0 │ 4495 │ 5297 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Io Net │ │ │ │ 0 │ 0 │ 3344 │ 5270 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Ionstre… │ │ │ │ 0 │ 0 │ 1232 │ 5421 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Mancer 2 │ │ │ │ 0 │ 0 │ 1448 │ 1673 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Novita │ │ │ │ 0 │ 0 │ 1680 │ 1692 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Parasail │ │ │ │ 0 │ 0 │ 1124 │ 1348 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Phala │ │ │ │ 0 │ 0 │ 1012 │ 1233 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Reka │ │ │ │ 0 │ 0 │ 2283 │ 2882 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Venice │ │ │ │ 0 │ 0 │ 1420 │ 1448 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘deepseek/deepseek-v4-flash-0731
deepseek-v4-flash-0731 is the eblume/talos#183 case-study model.
Run date: 2026-09-12
Egress: egress: http proxy :8092 — source IP 98.97.35.132 — API key: from env
Effort sweep (--reps 2)
Plan: 27 providers × 3 efforts × 2 reps = 162 calls, concurrency 3
Estimated spend: $0.2544
openrouter-probe (effort sweep)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ Alibaba │ 74 │ 23 │ 32 │ 0 │ 0 │ 1710 │ 2080 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ AtlasCl… │ 50 │ 20 │ 20 │ 0 │ 0 │ 1418 │ 1593 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Baidu │ 54 │ 20 │ 18 │ 0 │ 0 │ 801 │ 862 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ BaseTen │ 57 │ 20 │ 20 │ 0 │ 0 │ 936 │ 1279 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Cloudfl… │ 60 │ 18 │ 20 │ 0 │ 0 │ 1360 │ 2587 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ CoreWea… │ 38 │ 20 │ 19 │ 0 │ 0 │ 600 │ 2355 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ DeepInf… │ 52 │ 30 │ 32 │ 0 │ 0 │ 2098 │ 8265 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Digital… │ 71 │ 22 │ 30 │ 0 │ 0 │ 2133 │ 2918 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Firewor… │ 47 │ 20 │ 21 │ 0 │ 0 │ 1172 │ 1645 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ GMICloud │ 73 │ 20 │ 24 │ 0 │ 0 │ 1950 │ 3057 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Inceptr… │ 34 │ 65 │ 19 │ 0 │ 0 │ 1112 │ 1492 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Makora │ 42 │ 61 │ 20 │ 0 │ 0 │ 702 │ 1693 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Mancer 2 │ 50 │ 40 │ 24 │ 0 │ 0 │ 2863 │ 4031 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Morph │ 81 │ 92 │ 20 │ 0 │ 0 │ 24804 │ 42913 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ NextBit │ 88 │ 20 │ 26 │ 0 │ 0 │ 2380 │ 2702 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Novita │ 66 │ 28 │ 22 │ 0 │ 0 │ 1832 │ 2361 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ OpenInf… │ 63 │ 76 │ 74 │ 0 │ 0 │ 4814 │ 6923 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Parasail │ 58 │ 20 │ 19 │ 0 │ 0 │ 1367 │ 1650 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Phala │ 46 │ 20 │ 22 │ 0 │ 0 │ 1844 │ 2268 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Reka │ 60 │ 19 │ 19 │ 0 │ 0 │ 786 │ 1064 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Relace │ 24 │ 20 │ 22 │ 0 │ 0 │ 889 │ 1199 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Sail │ 76 │ 26 │ 22 │ 0 │ 0 │ 1646 │ 2680 │ 0/6 │
│ Research │ │ │ │ │ │ │ │ (0%) │
│ Silicon… │ 57 │ 21 │ 20 │ 0 │ 0 │ 2488 │ 2827 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ StreamL… │ 51 │ 23 │ 20 │ 0 │ 0 │ 2424 │ 3147 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Together │ 44 │ 20 │ 20 │ 0 │ 0 │ 1351 │ 1896 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Venice │ 79 │ 34 │ 32 │ 0 │ 0 │ 1973 │ 2815 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Wafer │ 76 │ 18 │ 46 │ 0 │ 0 │ 564 │ 786 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘Empty check (--empty-check --reps 5, effort low)
Plan: 27 providers × 1 efforts × 5 reps = 135 calls, concurrency 3
Estimated spend: $0.2120
openrouter-probe (empty-check)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ Alibaba │ │ │ │ 0 │ 0 │ 1668 │ 2181 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ AtlasCl… │ │ │ │ 0 │ 0 │ 1074 │ 1396 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Baidu │ │ │ │ 0 │ 0 │ 1072 │ 1343 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ BaseTen │ │ │ │ 4 │ 4 │ 236 │ 1028 │ 0/1 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Cloudfl… │ │ │ │ 0 │ 0 │ 2217 │ 2725 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ CoreWea… │ │ │ │ 0 │ 0 │ 615 │ 1058 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ DeepInf… │ │ │ │ 0 │ 0 │ 964 │ 1187 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Digital… │ │ │ │ 0 │ 0 │ 3447 │ 3934 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Firewor… │ │ │ │ 0 │ 0 │ 2387 │ 2900 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ GMICloud │ │ │ │ 0 │ 0 │ 1789 │ 3011 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Inceptr… │ │ │ │ 0 │ 0 │ 1368 │ 1483 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Makora │ │ │ │ 0 │ 0 │ 804 │ 879 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Mancer 2 │ │ │ │ 0 │ 0 │ 1373 │ 3522 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Morph │ │ │ │ 0 │ 0 │ 21184 │ 34679 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ NextBit │ │ │ │ 0 │ 0 │ 2588 │ 2823 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Novita │ │ │ │ 0 │ 0 │ 1837 │ 2253 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ OpenInf… │ │ │ │ 0 │ 0 │ 5052 │ 5527 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Parasail │ │ │ │ 0 │ 0 │ 1998 │ 3063 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Phala │ │ │ │ 0 │ 0 │ 2177 │ 2589 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Reka │ │ │ │ 0 │ 0 │ 711 │ 778 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Relace │ │ │ │ 0 │ 0 │ 1156 │ 1461 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Sail │ │ │ │ 0 │ 0 │ 2472 │ 2707 │ 0/5 │
│ Research │ │ │ │ │ │ │ │ (0%) │
│ Silicon… │ │ │ │ 0 │ 0 │ 2386 │ 2434 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ StreamL… │ │ │ │ 0 │ 0 │ 2235 │ 3551 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Together │ │ │ │ 0 │ 0 │ 1992 │ 4194 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Venice │ │ │ │ 0 │ 0 │ 1447 │ 2788 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Wafer │ │ │ │ 0 │ 0 │ 755 │ 1092 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘google/gemini-2.5-flash
gemini-2.5-flash is the talos code-default FALLBACK_MODEL in src/openrouter.ts.
Run date: 2026-09-12
Egress: egress: http proxy :8092 — source IP 98.97.35.132 — API key: from env
Effort sweep (--reps 2)
Plan: 2 providers × 3 efforts × 2 reps = 12 calls, concurrency 3
Estimated spend: $0.0678
openrouter-probe (effort sweep)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ Google │ 66 │ 46 │ 52 │ 0 │ 0 │ 1512 │ 2065 │ 0/6 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Google │ 59 │ 69 │ 52 │ 0 │ 0 │ 1418 │ 1668 │ 0/6 │
│ AI │ │ │ │ │ │ │ │ (0%) │
│ Studio │ │ │ │ │ │ │ │ │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘Empty check (--empty-check --reps 5, effort low)
Plan: 2 providers × 1 efforts × 5 reps = 10 calls, concurrency 3
Estimated spend: $0.0565
openrouter-probe (empty-check)
┏━━━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┳━━━━━━━━┳━━━━━┳━━━━━┳━━━━━━━━┳━━━━━━━━┳━━━━━━━━━┓
┃ tag ┃ re low ┃ re high ┃ re max ┃ err ┃ 429 ┃ p50 ms ┃ p95 ms ┃ empty ┃
┡━━━━━━━━━━╇━━━━━━━━╇━━━━━━━━━╇━━━━━━━━╇━━━━━╇━━━━━╇━━━━━━━━╇━━━━━━━━╇━━━━━━━━━┩
│ Google │ │ │ │ 0 │ 0 │ 1287 │ 1393 │ 0/5 │
│ │ │ │ │ │ │ │ │ (0%) │
│ Google │ │ │ │ 0 │ 0 │ 1476 │ 1629 │ 0/5 │
│ AI │ │ │ │ │ │ │ │ (0%) │
│ Studio │ │ │ │ │ │ │ │ │
└──────────┴────────┴─────────┴────────┴─────┴─────┴────────┴────────┴─────────┘