站内导读

中文

定位:腾讯混元 Hy4-flash 多模态指令模型,原生接受图文输入并输出文本,主打高性价比与超长上下文处理能力。

核心能力

  • 总参数 220B 含 64B Engram 参数、每词元仅激活 12B,在保持能力的同时显著压低单次推理的计算成本
  • 原生图文输入、文本输出,上下文窗口最高达 1M 词元,适合处理超长文档与多图多轮等复杂输入场景
  • 42 层骨干由一层稠密前馈与 41 层 MoE 组成并配恒等超连接,视觉编码器经 MLP 投影层与骨干对齐
  • 内置五层 DFly2 推测解码草稿模块复用缓存加速长上下文生成,并提供量化说明与 vLLM、SGLang 部署路径,还支持通过 Transformers 与兼容接口快速上手调用

适用人群:需要长上下文多模态应用、企业级部署和成本敏感型推理服务的开发者与团队及产品团队。

相关项目 · HuggingFace

查看全部「HuggingFace」项目 →