前言¶
给大模型接上工具、放进业务流程之后,攻击面也随之扩大:一句精心构造的提示词可能绕过约束拿到数据库内容,一个被投毒的训练样本可能让模型在关键场景持续出错,而现有的 Web 安全测试工具并不覆盖这些场景。AI安全与红队测试这个 Skill 针对的就是这个问题:把 AI 系统当作需要安全测试的对象,提供攻击面清单、测试流程、用例库和报告模板,让团队可以按固定方法做一轮红队测试。
下面介绍这个 Skill 的内容、覆盖范围和使用方式。
这是什么¶
AI安全与红队测试是一个基于通用 SKILL.md 格式编写的 Agent Skill,定位为 AI 系统红队测试的实操手册。其官方地址为 https://api.skillhub.cn/user_8a3569c1/ai-security-redteam,在 SkillHub 上分类为 it-ops-security,评分 99882,下载 847 次。
它解决的问题是:AI 系统的安全问题分散在提示层、工具调用层、数据层和供应链层,缺少一个统一的测试框架。该 Skill 把攻击面梳理成六大类,给出从目标定义到修复复测的完整流程,并提供可直接使用的测试用例与报告模板,目标是让 AI 工程团队和安全团队用同一套语言描述和处理 AI 风险,与 AI 治理、智能体治理等制度性工作形成”制度+技术”的闭环。
核心功能¶
根据官方简介,Skill 的内容可以归纳为五部分。
攻击面与风险映射¶
覆盖 AI 系统六大攻击面:提示注入、越权与工具滥用、数据与隐私泄露、幻觉与质量缺陷、供应链与模型投毒、拒绝服务。同时提供 OWASP LLM Top 10 风险映射,便于把测试发现对齐到业界标准风险分类,而不是自造一套分类。
完整红队测试流程¶
流程分为六个步骤:目标定义、攻击面建模、用例设计、执行、报告、修复复测。每一环都有对应的产出物要求,例如攻击面建模要给出系统组件和信任边界,报告要给出漏洞分级与修复建议。
测试用例库¶
包含可直接使用的用例:直接与间接提示注入测试用例、Agent 越权与沙箱逃逸测试、训练数据泄露与记忆攻击测试、幻觉检测基准。用例库是现成资产,不需要从零编写。
配套工具与模板¶
提供零依赖本地工具,一键生成风险清单;附测试用例模板与报告模板,报告模板内置漏洞分级与修复建议字段。
面向对象¶
面向 AI 工程、安全测试、信息安全负责人三类角色。对 AI 治理、智能体治理等制度性工作形成补充,而不是替代。
安装与启用¶
该 Skill 基于通用 SKILL.md 格式,官方安装与启用命令需要从 SkillHub 页面获取。本次抓取时官方页面(https://api.skillhub.cn/user_8a3569c1/ai-security-redteam)未能返回具体内容,因此不在此提供未经核实的安装命令。使用前请打开官方地址,按页面说明在对应 Agent 环境(Cursor、Codex CLI、Claude Code 等)中启用该 Skill;不同环境启用 Skill 的方式可能不同,以官方页面说明为准。
典型用法¶
官方资料未给出命令行级示例,以下流程性用法来自其红队测试流程描述。
1、定义测试目标。明确被测 AI 系统的边界:模型服务、Agent 工具链、数据来源、被授权的测试范围。这一步决定后续用例设计的覆盖范围。
2、攻击面建模。按六大攻击面逐一列出系统的暴露点:用户输入入口、工具调用接口、训练数据管道、模型与依赖的来源。把信任边界画清楚,后续用例才有锚点。
3、用例设计。从用例库中挑选对应该攻击面的用例,例如间接提示注入用例针对的是工具返回内容被模型当作指令执行的场景,记忆攻击用例针对的是模型在多轮对话中泄露训练数据中记住的敏感片段。
4、执行与记录。执行用例并记录实际行为与预期的偏差,作为报告的原始素材。
5、输出报告。使用内置报告模板,按漏洞分级填写发现,给出修复建议。
6、修复后复测。针对修复项重跑相关用例,确认风险关闭。
适用场景与注意¶
适合以下场景:系统已经接入大模型且暴露在外部输入下,需要做上线前安全评估的团队;需要对 Agent 工具调用做越权测试的团队;需要统一 AI 风险分类口径、与治理流程对齐的团队。
使用前注意三点。第一,该 Skill 提供的是测试方法、用例和模板,不替代漏洞扫描工具或人工渗透测试的深度,复杂攻击链仍需人工设计。第二,用例库覆盖的是常见攻击类型,业务特有的风险(如特定工具链的业务逻辑漏洞)需要自行补充用例。第三,官方页面本次未能抓取到详细文档,安装方式、最新版本和用例细节请以官方页面为准,避免按过期信息配置。
结尾¶
AI安全与红队测试的价值在于把 AI 系统安全从零散的提示词加固工作,变成一套有攻击面清单、有流程、有模板的可复现测试方法。六大攻击面覆盖和 OWASP LLM Top 10 映射让它适合作为团队内部 AI 安全基线;零依赖工具和报告模板降低了从零搭建红队流程的成本。官方地址:https://api.skillhub.cn/user_8a3569c1/ai-security-redteam。