术语slug: residual-vector-quantization

残差向量量化

Residual Vector Quantization

逐级量化残差以补足细节的离散化方法,用于视觉 token 表征

收录情报动态

共 1 篇 · 第 1/1 页
IT之家 · 智能时代T2·基座大模型
88 分
美团开源 1.6 万亿参数 LongCat-2.5 模型

美团龙猫正式开源原生多模态模型 LongCat-2.5,总参数 1.6 万亿、每 token 激活约 480 亿,支持百万级上下文,采用 MIT 协议允许商用推理与二次训练。模型将视觉信号量化为多层级离散 token 并与文本共享主干参数,同时以 W4A4 4 bit 量化方案适配显存与带宽受限的国产算力芯片。

残差向量量化 | Today for AI