Instruction Capacity: Behavior and Degradation of Language Models under Controlled Load 封面
HuggingFace
论文2026-10-2…

Instruction Capacity: Behavior and Degradation of Language Models under Controlled Load

The quality with which language models follow instructions falls as the load grows, yet there is still no quantity that expresses the limit of a model in units of load with an uncertainty. We propose an instrument in wh…

来源:HuggingFace Papers收录于 2026年10月30日

站内导读

中文

用途:这篇内容提出一种测量语言模型指令遵循能力上限的方法,把模型在负载增大时的行为与退化过程量化,并给出带不确定度的容量估计。

能做什么

  • 把「指令容量」定义为以负载为单位、带不确定度的模型能力上限。
  • 在受控负载下观察模型遵循指令的行为变化与性能退化。
  • 提供一种可复用的测量工具,用于比较不同模型或配置。
  • 关注负载增长与指令遵循质量下降之间的对应关系。

适用场景:适合做模型评测、基准设计或需要判断模型在多大负载下仍可靠的研究与工程人员,前提是能运行模型推理并控制输入负载。

相关项目 · HuggingFace

查看全部「HuggingFace」项目 →