LLM Çıkarım Benchmark Gezgini

2× DGX Spark üzerinde DeepSeek-V4-Flash-Vision-Exp — FP8, vLLM, TP2, spekülatif kod çözme k=3 çıkarım benchmark'ı

Bu yapılandırmayı LLM Çıkarım Benchmark Gezgini'nde aç

ModelDeepSeek-V4-Flash-Vision-Exp
Parametre305B
Zekâ Endeksi34.8
Agentic Endeksi47.5
Cihaz2× DGX Spark
KuantizasyonFP8
Maks C2
Chat Kapasitesi8
Agentic Kapasitesi3
TP2
DP—
PP—
Inference EnginevLLM
Spekülatif Kod ÇözmeEvet
CTTFT (ms)TPS (tok/s)Durum
130035.99PASS
249623.14PASS
463316.18FAIL
89088.75FAIL

OpenZeka'nın ölçümünde, 2× DGX Spark üzerinde vLLM ile FP8 formatında ve spekülatif kod çözmeyle sunulan DeepSeek-V4-Flash-Vision-Exp (305B parametre, TP=2), tek istekte istek başına 36 tok/s üretim hızına ve 300 ms ilk token süresine (TTFT) ulaştı.

Hız hedefleri ve kullanılabilir KV önbelleği kapasitesi göz önünde bulundurulduğunda, tahmini kapasite chat kullanımı için 8, agentic kullanım için 3 kullanıcıdır. Gerçekçi kapasite muhtemelen bu iki değer arasında olacaktır. Kodlama, araç kullanımı, uzun iş akışları ve çoklu ajan kullanımının ağırlıklı olduğu senaryolarda kapasite agentic tahmine yaklaşırken; daha kısa etkileşimlerin, standart sohbetlerin ve daha hafif görevlerin ağırlıkta olduğu kullanımlarda chat tahminine yaklaşacaktır.

Notlar: DSpark k=3, 131K context. Model: deepseek-ai/DeepSeek-V4-Flash-Vision-Exp

Zekâ Endeksi ve Agentic Endeksi değerleri Artificial Analysis tarafından yayımlanmıştır ve kaynak belirtilerek burada aktarılmıştır.