DGX Spark 64GB vs 128GB, from the memory math:- Llama 3.3 70B Q4_K_M @32K: ~55.7 GB, fits the 64GB- GPT-OSS 120B MXFP4 @...

DGX Spark 64GB vs 128GB, from the memory math:- Llama 3.3 70B Q4_K_M @32K: ~55.7 GB, fits the 64GB- GPT-OSS 120B MXFP4 @​8K: ~66.5 GB, needs the 128GB- Both share 273 GB/s, so dense 70B tops out around 7 tok/shttps://quantized.uk/cookbook/dgx-spark-64gb-vs-128gb/#LocalLLM #DGXSpark #LLM #SelfHosted

Read Original

Related

Mastodon discussion 45m ago

ソラリスではGolden Gateはどう見られているんでしょうかApple、Mac向けに不具合修正とセキュリティアップデートを含んだ「macOS 27.2.1 Golden Gate」をリリース。 https://applech2.com/...

ソラリスではGolden Gateはどう見られているんでしょうかApple、Mac向けに不具合修正とセキュリティアップデートを含んだ「macOS 27.2.1 Golden Gate」をリリース。 https://applech2.com/archives/20261110-macos-27-2-1-golden-gate-update.html#Apple...