部署工程共0篇

部署工程 大事记

AIHOT重要进展

资料来源于AIHOT,不代表青峰联创已逐项独立核验。AIHOT专题 ↗

数据校验时间:2026-11-05 12:27:13 UTC;数据待更新,显示最近有效快照

重要进展 IMPORTANT_PROGRESS

2026-06-18 — 2026-06-18
重要进展 · 第 9 / 11 页

  1. 产品
    Vercel 发布开源 AI 智能体框架 Eve:每个智能体就是一个文件目录

    AIHOT事件 ↗原始外链未提供

部署工程 精选历史资讯

AIHOT · 精选 · 不计入本站文章

主题归属复核已到期或尚未完成;当前展示上次核验的历史缓存,不代表最新已确认的主题归属。

— · 3 条
精选资讯 · 第 1 / 1 页

SGLang 引入 Waterfill 与 LPLB 提升 DeepEP MoE 负载均衡

SGLang 为 DeepEP MoE 推理新增两种调度时负载均衡方法:Waterfill 将共享专家分配给负载更低的 rank,在 DeepSeek-V3/R1 服务负载下使总吞吐量提升 1.48% 至 4.66%,在 DeepSeek V4 上最佳点从 49,253 tok/s 提升至 51,677 tok/s(+4.92%);LPLB 基于线性规划优化冗余专家副本的 token 路由,配合 EPLB 在相同集群上实现吞吐量提升 0.84% 至 7.34%。

冻结多token预测加速Pixel上的Gemini Nano模型

Google Research提出一种新架构,在已冻结的Gemini Nano v3模型上改造Multi-Token Prediction(MTP),以加速Pixel 9和10系列上的设备端推理。该方法基于EAGLE框架和CALM,无需单独训练占用内存的草稿模型,通过“晚期退出”策略实现加速。AI通知摘要和校对功能因此生成文本速度显著提升、能耗降低,开发者无需为每个新任务微调独立模型。

Google Research:Blog(网页)发表于 2026-06-26 00:00归档日期 2026-06-26

归档:AIHOT主题时间 · 北京时间 · 更正时间不改变归档日期