Token导航 LogoToken导航TokenDH.com

20万刀砸出168万Skills画像!开源技能网关SkillsVote,让Agent在使用反馈中越选越准

更新时间 2026-05-22来源 智猩猩正文 3983字阅读约 13分钟4 张图片
智猩猩AI整理
编辑:没方

最近几个月,GitHub上的 SKILL.md 文件正以惊人速度增长。


围绕 Claude Code、OpenClaw、Hermes等 Agent 生态,越来越多开发者把自己的经验、脚本、流程和工具调用方式封装成 SKILL.md。与此同时,SkillsMP、LobeHub、SkillHub、Manus 等技能市场也陆续出现。

表面上看,Agent 终于不缺“装备”了。

写代码有写代码的 Skill,做 PPT 有做 PPT 的 Skill,处理 PDF、跑测试、写报告、调浏览器,也都能找到对应的技能。只要把这些技能装进 Agent,它似乎就能从“裸奔模型”升级成“全副武装的数字员工”。

然而,技能多了,Agent就一定更强了吗? 

一个 Skill 可能描述很漂亮,但依赖环境根本不存在。有的 Skill 可能看起来相关,但真正执行时会把 Agent 带偏。还有一些 Skill 只是把普通提示词包装成 Markdown,看起来像技能,实际并没有稳定可复用的能力。

SkillsBench 论文中也给出了一个很有代表性的结论——精心策划的 Skills 平均能将任务通过率提升 16.2 个百分点,但在 84 个任务中,有 16 个任务反而因为 Skills 变差,而让模型自己生成 Skills,平均来看也没有带来稳定收益。

图片
  • 论文链接:

    https://arxiv.org/pdf/2602.12670

这说明,Agent 生态正在从“拼模型”进入“拼 Skill 质量”的阶段。

为了更好地应对这一新趋势,今天要给大家介绍的开源项目是 MemTensor 推出的 SkillsVote。

它能让 Agent 在执行任务前,就知道哪些技能值得用、为什么值得用、怎么组合使用,以及用完之后效果到底好不好。

SkillsVote不是再做一个简单的技能目录或技能市场,而是把Skills当成真正的工程资产来系统管理——从收集、深度画像、精准推荐、执行归因,到反馈进化,形成完整的生命周期治理闭环。

开发者从GitHub开源仓库中收集了168万个SKILL.md 文件,并用 GPT-5.4 等强模型对每个 Skill 做了系统化的 LLM-driven 预处理,覆盖环境依赖解析、能力画像、质量判断和可验证性评估等多个层面。

据了解,这一预处理阶段的模型调用成本就超过了20万美元

但这笔钱花得很关键,因为如果没有这些 Skill 画像,所谓推荐系统就只能做关键词匹配,和普通搜索引擎没有本质区别。

图片
  • 项目链接:

    https://github.com/MemTensor/skills-vote

  • 论文链接:

    https://arxiv.org/pdf/2605.18401

01

百万技能之后,

Agent 真正缺的是“会选择”

SkillsVote的定位更像一个面向Agent的“技能网关”。

它并非简单地把海量 Skill 一股脑塞进上下文,而是构建了一条 推荐 → 执行 → 反馈 → 进化 → 更好的推荐 完整闭环系统。

在任务开始前,SkillsVote会根据用户目标和 Agent 当前环境,从动态推荐最合适的 Skill 组合,并给出推荐理由、使用指南和多技能编排建议。

图片

具体来看,它主要围绕四个环节展开:

(1)Skill 画像


在推荐之前,SkillsVote 首先要回答一个基础问题:这个 Skill 到底能不能用?

它会分析一个 Skill 适合什么操作系统、需要哪些命令、是否依赖联网、是否需要环境变量、是否涉及文件写入权限或高风险操作。

对 Agent 来说,这些信息非常关键。

因为同一个 Skill,在本地开发机上可能很好用,但在云端沙箱、受限容器或无网络环境里,就可能直接失败。

这一步相当于给每个 Skill 建立“能力档案”。Agent 不只是知道这个 Skill 的名字和描述,还能知道它适合什么任务、依赖什么环境、可能在哪些场景中失效。

(2)质量评估


一个好的 Skill 不能只是“看起来相关”,还必须具备内容一致性、引用完整性和任务导向性。

SkillsVote 会检查描述与实际内容是否匹配、引用的脚本和资源是否真实存在、给 Agent 的指令是否清晰可执行。

通过这一预处理,推荐系统不再只知道 Skill 的名字,而是真正理解“它能做什么、边界在哪里、可靠性如何”。

(3)可验证性评估


SkillsVote 还会判断一个 Skill 是否具备可验证性。

有些 Skill 的效果很容易验证,比如生成文件是否存在、测试是否通过、网页是否成功部署、命令是否正常返回。

但有些 Skill 只提供抽象建议,很难判断它到底有没有帮助 Agent 完成任务。

SkillsVote 会针对可验证的 Skills 合成任务,并在执行后分析 Agent 轨迹,把整个任务拆解成与 Skill 相关的子任务,再将结果归因到 Skill 使用、Agent 探索、环境因素和最终信号上。

这一步很关键。

因为推荐系统如果只看“有没有调用 Skill”,很容易误判。Agent 成功了,不一定是 Skill 的功劳;Agent 失败了,也不一定是 Skill 本身不行,可能是环境缺依赖,也可能是 Agent 执行路径错了。

SkillsVote 想做的是把这些因素拆开,判断 Skill 在真实执行中到底贡献了什么。

(4)反馈与进化


这正是 SkillsVote 与普通搜索工具最大的区别。

它不是推荐完就结束,而是会利用执行后的真实反馈持续进化。只有被成功验证且可复用的经验,才能通过“证据门控”进入技能库更新。反之,经常失败或无效的 Skill 会被降权或优化。

图片

这样就形成了一个真正的正向闭环:

第一次推荐依赖画像和质量评估;

执行后获得真实反馈;

经过归因验证后更新技能库;

下一次推荐就会更精准、智能。

举个例子,当 Agent 需要完成“资料检索 → 生成 PPT → 输出 HTML 展示页”的复杂任务时,SkillsVote 可以推荐 deep-research、pptx-generator、html-presentation 等技能组合,并生成步骤化执行指南。

如果执行成功,这些组合会成为后续推荐的重要参考;如果失败,系统也会精准定位是 Skill 本身问题、环境缺失,还是调用不当。

可以发现,SkillsVote 真正想做的,不是帮 Agent 找到更多 Skill,而是帮 Agent 建立一套自我优化的技能使用机制。 

02

使用方法

SkillsVote 提供两种使用方式:一种是接入托管版 SkillsVote 服务,适合直接使用官方已经构建好的大规模 Skill 索引;另一种是 local-first 模式,适合企业或个人在本地、私有 Skill 库中做推荐。

使用托管版时,可以直接把下面这段提示词交给支持 Skills 的 Agent:

    Install the `skills-vote` skill following https://raw.githubusercontent.com/MemTensor/skills-vote/main/integration/skills/INSTALL.mdUse the following values: - `SKILLS_VOTE_API_KEY`: "YOUR_API_KEY"- `GH_TOKEN`: "YOUR_GITHUB_TOKEN"

    手动安装也很简单。Windows PowerShell 可以这样设置环境变量并安装:

      [Environment]::SetEnvironmentVariable("SKILLS_VOTE_API_KEY", "YOUR_API_KEY", "User")npx skills add MemTensor/skills-vote --skill skills-vote

      macOS / Linux 用户可以这样操作:

        # 使用zsh终端,请改用~/.zshrc 文件echo 'export SKILLS_VOTE_API_KEY="YOUR_API_KEY"' >> ~/.bashrc && source ~/.bashrcnpx skills add MemTensor/skills-vote --skill skills-vote

        如果希望使用本地或私有 Skill 库,可以安装 local-first 版本:

          # 复制进agent Install the `skills-vote-local` skill following https://raw.githubusercontent.com/MemTensor/skills-vote/main/integration/skills/INSTALL.md#手动安装 npx skills add MemTensor/skills-vote --skill skills-vote-local

          安装完成后,需要进入安装好的 Skill 根目录,配置 configs/config.yaml

          完整流程请参考:

          https://github.com/MemTensor/skills-vote/blob/main/integration/skills/INSTALL.md

          03

          从“技能堆叠”到“经验驱动”:

          Agent Skills 正在进入推荐进化时代

          SkillsVote的出现,标志着Agent技能生态的一个重要拐点。

          未来的Agent不再是被动接受技能的“容器”,而是能够主动评估、筛选、组合、验证,并逐步形成自己的“技能使用偏好”和“经验记忆”。

          普通Skills推荐系统做到的是“找到Skill”,而SkillsVote真正厉害的地方在于,它在推荐之后,继续跟踪执行过程,通过任务结果、执行轨迹和精细归因,把真实世界中的成功经验与失败教训重新沉淀回系统。

          它不是一个静态的Skill索引库,而是一个会随着Agent真实使用不断学习、迭代、进化的技能推荐系统。

          当 Agent 面对的不再是几十个工具,而是百万级技能库时,真正稀缺的不是更多 Skill,而是判断哪些 Skill 真正好用的能力。

          SkillsVote 做的,正是把 Agent Skills 从“技能堆叠”推向“经验驱动的技能调度”。

          文章标签模型发布开源智能体
          资讯来源:由AI资讯编辑整理自互联网公开内容,版权归原作者所有,未经许可,不得转载。

          继续浏览更多资讯

          返回资讯目录

          相关资讯

          更多