论文提出 BITCOS,一种由存在位图加压缩符号向量组成的三值 LLM 权重布局,按零密度 z 计成本为 2−z bits per weight。作者实测 29 个三值模型发现零权重占比最高达 51.5%,其中 26 个模型的存储比 five-trit packing 更紧凑,最稀疏模型达 1.485 bits per weight。 🔗 阅读原文 via AIHOT · https://aihot.news/items/cmu4ot96408gmrodc5ejms3j1
信息源:AI HOT · 全部动态
- 原文链接:BITCOS 布局突破三值 LLM 的 1.58-bit 存储壁垒
- 分类:论文
- 作者:Hacker News:AI 热帖
- 发布时间:2026/09/17 04:59

评论0