3 篇文章带有标签 “arxiv”

SkVM：面向随处高效执行的技能编译

上海交通大学

摘要

LLM 智能体越来越多地将技能（skill）作为可复用的组合单元。尽管技能在不同智能体平台间共享，但现有系统将其视为原始上下文处理，导致同一技能在不同智能体上表现不一致。这种脆弱性损害了技能的可移植性与执行效率。

为应对这一挑战，我们分析了 118,000 个技能，并从传统编译器设计中汲取灵感。我们将技能视为代码，将 LLM 视为异构处理器。为使可移植性成为现实，我们将技能的需求分解为一组原语能力（primitive capabilities），并衡量每个模型-执行框架（model-harness）组合对这些能力的支持程度。基于这些能力画像，我们提出了 SkVM——一个面向可移植且高效技能执行的编译与运行时系统。在编译期，SkVM 执行基于能力的编译、环境绑定与并发提取。在运行期，SkVM 应用 JIT 代码固化（code solidification）与自适应重编译以优化性能。

我们在 8 个不同规模的 LLM 和 3 个智能体执行框架上评估了 SkVM，覆盖 SkillsBench 及代表性技能任务。结果表明，SkVM 显著提升了不同模型与环境下的任务完成率，同时降低 Token 消耗高达 40%。在性能方面，SkVM 通过增强并行性实现最高 3.2× 加速，并通过代码固化实现 19–50× 的延迟降低。

1. 引言

translationarxivpaperskillagentcompilerjitharnessskvm

链接

SkVM - 面向 LLM 技能的编译与运行时系统

一句话概括

把 Skill 当作"代码"、把 LLM 当作"异构处理器"，借鉴传统编译器（AOT + JIT）设计思想，首次为 LLM Agent 的 Skill 构建了跨模型、跨平台的编译与运行时系统。

一、核心问题：Skill 的"可移植性危机"

当前 Agent 把 Skill 当作原始文本直接塞给模型，导致同一 Skill 在不同模型/Harness 上表现天差地别。作者分析了 118,000+ 个 Skill（clawhub.ai + skills.sh），发现：

问题 数据
使用 Skill 后性能下降 15% 的任务
使用 Skill 后无变化 17% 的任务
至少一个模型无改善 87% 的任务
Token 开销暴增 最高 451%

三大失配：

  • P1 模型失配：Skill 假设模型能区分库 API 与 CLI，小模型直接翻车
  • P2 Harness 失配：同一模型在不同 Harness（Claude Code / OpenCode / BareAgent）上结果差异巨大
  • P3 环境失配：缺少依赖包时，Qwen 成功率从 100% 暴跌到 33-67%，且 Token 消耗翻倍

二、核心类比：编程语言的演进

arxiv paper skill agent compiler jit harness skvm

LLM 智能体的外化：记忆、技能、协议与 Harness Engineering 统一综述

论文基础信息

核心观点

可靠的智能体能力不只是来自更强的模型本身，而是来自将认知负担系统性地转移到外部组件：

  • 记忆外化：解决跨会话状态延续问题
  • 技能外化：复用成熟的流程经验，避免每次都重新推理
  • 协议外化：标准化交互规则，让工具调用、多智能体协作更稳定
  • Harness（智能体引擎/管控框架） 是协调以上所有组件的统一运行层，是智能体系统的"认知环境"

什么是Harness？

Harness不是普通的工具链或者SDK，而是模型运行的完整认知环境：

  • 模型本身只有通用推理能力，Harness决定了它能访问什么数据、能执行什么操作、怎么受到约束、怎么从错误中学习
  • 智能体的能力不是模型单独具备的，而是模型和Harness环境耦合之后共同产生的
  • Harness的核心作用是把零散的外部组件（内存、技能、协议）组合成连贯的智能行为，把无边界的推理任务转化为结构化的可控执行流程
llm-agentharness-engineeringexternalizationmemoryskillsprotocolsarxivpaper-reviewopenai-codexclaude-code