Unsloth 的 2bit 动态量化可以在 M5 Max 本地跑 13tps 的 dpsk v4 flash,虽然 128G 内存只够放… — 豆腐煲 — TG.ME

Unsloth 的 2bit 动态量化可以在 M5 Max 本地跑 13tps 的 dpsk v4 flash,虽然 128G 内存只够放 54k context,虽然agentic 不了一点,但是当断网时候的搜索引擎可能还凑合
July 8, 2026 336 1