返回热点榜
compute热度 15.2°

AI 聚合热点事件 · 2026/11/11

vLLM 实现编码器解耦 多模态推理吞吐大幅提升

1 篇收录报道1 家独立信源交叉印证持续跟踪至 2026/11/11 08:00:00
全景综述与最新动态
1 家信源交叉印证

vLLM 社区推进 EPD(编码器/预填充/解码)解耦架构,将视觉编码阶段拆分为独立部署的实例,使其可随媒体大小与模态需求独立扩缩容。vLLM 主分支现已支持 DeepSeek V4.1 Flash 的纯元数据 EPD,并扩展至远程嵌入传输、共享缓存与请求路由等环节。

最新动向/vLLM 社区推进 EPD(编码器/预填充/解码)解耦架构,将视觉编码阶段拆分为独立部署的实例,使其可随媒体大小与模态需求独立扩缩容。vLLM 主分支现已支持 DeepSeek V4.1 Flash 的纯元数据 EPD,并扩展至远程嵌入传输、共享缓存与请求路由等环节。

逐小时热度走势

12 个完整观测小时
当前
15.2
峰值
20.008:00
近 24h 变化
–

曲线只比较全程持续完整观测的同一批信源;缺口小时数据已插值平滑,保持趋势连续。

报道时间线

共 1 篇 · 最新优先
vLLM 实现编码器解耦 多模态推理吞吐大幅提升 | Today for AI