惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
云风的 BLOG
云风的 BLOG
aimingoo的专栏
aimingoo的专栏
Vercel News
Vercel News
T
The Blog of Author Tim Ferriss
F
Full Disclosure
A
About on SuperTechFans
C
Check Point Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
量子位
Know Your Adversary
Know Your Adversary
K
Kaspersky official blog
L
LINUX DO - 热门话题
Recorded Future
Recorded Future
C
Cisco Blogs
M
MIT News - Artificial intelligence
T
Tenable Blog
G
GRAHAM CLULEY
月光博客
月光博客
Recent Announcements
Recent Announcements
V
Visual Studio Blog
IT之家
IT之家
T
The Exploit Database - CXSecurity.com
The GitHub Blog
The GitHub Blog
T
Threat Research - Cisco Blogs
D
DataBreaches.Net
P
Privacy International News Feed
P
Proofpoint News Feed
I
Intezer
博客园 - 叶小钗
C
CXSECURITY Database RSS Feed - CXSecurity.com
The Hacker News
The Hacker News
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
博客园 - Franky
SecWiki News
SecWiki News
宝玉的分享
宝玉的分享
P
Palo Alto Networks Blog
Last Week in AI
Last Week in AI
小众软件
小众软件
Hacker News - Newest:
Hacker News - Newest: "LLM"
O
OpenAI News
N
News and Events Feed by Topic
Microsoft Security Blog
Microsoft Security Blog
Security Archives - TechRepublic
Security Archives - TechRepublic
N
News and Events Feed by Topic
The Cloudflare Blog
Spread Privacy
Spread Privacy
酷 壳 – CoolShell
酷 壳 – CoolShell
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
B
Blog RSS Feed

博客园 - 狂师

从 LLM 评测到 AI Agent 评测,我的一些思考! 测试开发必备的 AI 技能库:推荐6 个让接口自动化测试效率翻倍的 Skills 推荐一款开源工具:让 AI Agent 替你做 iOS、Android 自动化测试,能平替 Appium? AI 测试必备:多Agent Skill 智能编排,从「脚本执行」到「失败自愈」到「报告生成」,一键跑通全流程! 10万人都在用的 top10 skills,我帮你试了! Agent 工具到底怎么选? 还在手写测试报告?推荐一款 AI 测试Skill:只需一句指令,自动生成专业定制化测试报告! 测试人员必备:推荐一款智能测试数据清理AI Skill,支持db、redis、mq等 AI 测试必备:推荐一款能让自动化失败脚本「自己修好」的 AI skill! 端开发必装 Skill 清单:6 款 AI 技能,让你的开发效率原地起飞 做一款企业真正敢用的 AI 测试应用,到底难在哪? 新手学 Skills:是什么、怎么找、如何开发?(最通俗易懂版) 2026 最新 AI 学习路线全景图:从零基础到 AI 全栈测试与开发实战(附一站式智能测试平台) 2026 最具幸福感的互联网大厂排名! 聊一聊近年来互联网公司的裁员情况 比 Playwright 更给力,推荐一个AI Agent的浏览器自动化开源项目! 测试工程师的AI 技能库:推荐5个让你效率翻倍的Skills AI测试必学 | AI 赋能接口自动化测试系列(四):接口自动化脚本质量检查与优化Agent Skill AI测试必学 | AI 赋能接口自动化测试系列(三):接口自动化测试脚本生成Agent Skill AI测试必学 | AI 赋能接口自动化测试系列(二):全场景测试数据智能构造Agent Skill AI测试必学 | AI 赋能接口自动化测试系列(一):接口文档智能解析Agent Skill推荐 测试必学:推荐4个测试用例设计最值得掌握的Agent Skill,几乎覆盖所有用例设计场景! 面试官问:你用 AI 编程半年了,那怎么保证 Claude Code 写出来的代码是对的? AI 测试赋能全流程实战 | Agent Skill + AI 赋能「需求分析」 6000 字干货|Coze 智能体实战:搭建需求文档到测试用例自动生成工作流! QA Use:推荐一款AI 原生 E2E 测试平台,自然语言一键跑通用例! 2026学扣子Coze看这篇就够了!(新手入门教程) Codex新手保姆级教程:新手从安装到跑通第一个项目! 做一款企业真正敢用的AI测试应用,到底有多难?究竟难在哪? Claude Code 9 大神级 Skills,开发效率直接翻倍(安装、使用场景、踩坑经验) 别再瞎搞 AI 了!大厂AI业务落地的五个关键环节!(建议新手直接照搬) 有了AI测试工具,还需要掌握Playwright、Pytest、Selenium这些框架吗? 毫不夸张地说,这将是目前最全的AI测试教程!测试必看! 最近面完 30 个想转 AI 测试的人,我麻了:80% 都踩了这 4 个坑! 2026年我做了一个大胆的决定:我要收徒弟了! 程序员逼格拉满!ccstatusline:让你的 Claude Code 状态栏直接封神! AI 测试全场景提效:功能 / 性能 / 安全 / 自动化,用 AI 重塑测试工作流 2026 年 AI 编程实测:6 款顶流大模型对比,效率直接翻倍! 面试必问:公司用AI 赋能自动化,你是怎么用AI 做自动化测试的呢?(附落地全流程) 牛逼!119K star,软微开源神器,一款功能超强大的markdown 文档转换工具! 你说你会AI测试,那你是怎么实现AI+软件测试的呢?(附带5 层AI 质量管理体系) 一道面试题刷掉 90% 的人,测试人必懂:AI 生成用例的3 大陷阱 + 7 项审核指标 零代码 AI 自动化测试神器!Browser‑Use Web UI 保姆级教程,测试人直接上手 不用写脚本!Browser-Use 实操:AI 直接驱动浏览器自动化测试 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 2026 AI效率神器:Superpowers + Claude Code 保姆级教程 CC‑Switch 原来是这么玩的!90% 的人都没用对 为什么你的OpenClaw做不好自动化测试? AI到底会不会导致大规模失业?一次性把所有问题讲透!(深度好文) 推荐3款必备“测试神器”Skill:用例生成、根因分析一键搞定 为什么现在所有大厂都在做 CLI ?(附Cluade Code接入飞书CLI教程) 自动生成用例:基于OCR+ LLM的设计方案(附落地指南) 太强了!GLM-5.1 第一手实测,平替Claude Opus 4.6? 测试人必备的4个AI Skills(附下载地址和详细用法) 我带学员用 AI 做了个热点监控工具,太好用了! 测试必学:UI 自动化最值得掌握的两个Skills,几乎能覆盖所有UI测试场景! Cursor 生成测试用例实战:一个 Skill,10 分钟产出可评审测试用例 90% 的人都用错了!Playwright vs Chrome DevTools MCP到底该怎么选? 全球首个龙虾模型:GLM-5-Turbo(手把手安装、配置、使用教程)来了! 测试开发效率翻10倍!这10款AI Skills神器,我敢说90%的人没用过 对标OpenClaw,腾讯版国产“小龙虾” WorkBuddy正式上线了! Claude Code+GLM 5 安装配置与10个快速上手技巧 OpenClaw新手必看!推荐10个神器技能包 新手保姆级教程:OpenClaw 自动化操作浏览器!
AI 测试提效神器:推荐一款接口自动化测试提效skill!
狂师 · 2026-07-10 · via 博客园 - 狂师

导读:前面我们已经分享过了,如何用 AI + Agent Skill 把接口测试脚本自动"造"了出来。但脚本生成只是起点——真正让接口自动化测试产生价值的,是让脚本跑起来

今天就给大家推荐一款让能接口测试"听话地跑起来"的 Agent Skill: api-test-executor

写在开头

先问大家一个问题:你平时是怎么跑接口自动化测试的?

大概率是这样的——

  1. 打开终端,cd 到项目目录;
  2. 想跑某个模块的测试,但记不住 pytest 的 -k 参数怎么写;
  3. 翻一遍代码,找到对应的测试文件名;
  4. 拼好命令,执行;
  5. 跑完发现环境配置没切对,重来;
  6. 想只跑 P0 用例,发现脚本没有标签体系,只能按文件名筛选;
  7. 跑完之后,结果散落在终端里,整理成报告要花半天;
  8. 想让开发同事一起看,发现没有可分享的报告链接……

如果以上场景你中了三条以上,那么今天这款 skill,你一定要了解——api-test-executor,一款专为接口自动化测试执行设计的 Agent Skill。

一、它是什么?

api-test-executor 是接口自动化测试的智能执行调度引擎,你可以把它理解成测试执行闭环的"发动机"。

它的核心定位非常克制——只做三件事

  1. 触发执行:一键触发 pytest,自动加载环境配置、测试数据;
  2. 范围筛选:支持标签索引 + 自然语言双模式,让用户"说人话"就能圈定执行范围;
  3. 结果收集:结构化采集每条用例的状态、耗时、错误信息、请求/响应快照,输出标准化 JSON 和 Markdown 摘要。

听起来很简单?但简单背后,是反复打磨过的设计。

二、5 大核心亮点

① 自然语言调用:说人话就能跑

这是它最打动人的一点。

传统方式,跑一组测试你得这么写:

pytest testcases/ -k "smoke and auth" -n 4 --reruns 2 --timeout=30 \
  --alluredir=./allure-results --html=./report.html -v

用 api-test-executor,你只需要说一句:

在 test 环境跑一下登录模块的冒烟测试

它会自动解析为:

  • 环境:test
  • 范围:冒烟测试(smoke)
  • 模块:登录(auth)
  • 并发:4 线程
  • 失败重试:2 次

解析完还会主动向你确认:"我将执行:test 环境,冒烟测试,登录模块,4 线程,确认吗?"——确认后才真正执行,避免误操作

支持的语义包括但不限于:

你说的话 自动解析结果
"跑一下冒烟测试" --scope smoke
"执行所有用例" --scope full
"只跑登录相关的" --module auth
"跑一下订单和支付" --module order,payment
"只跑 P0 用例" --priority P0
"排除不稳定的用例" --exclude-tag flaky
"8 个线程跑" --parallel 8
"失败重试 3 次" --retry 3
"模拟执行看看" --dry-run

甚至支持组合语义:

"在 test 环境跑一下冒烟测试,只跑登录和订单模块的 P0 用例,排除 flaky 的"

也能精准解析为:

--env test --scope smoke --module auth,order --priority P0 --exclude-tag flaky

这意味着:测试人员不用再记复杂的命令参数,也不用频繁翻文档。说人话,就能跑测试。

② 多维筛选:想跑什么就跑什么

传统测试执行最常见的尴尬——想跑一部分用例,但筛选不出来

api-test-executor 支持三种筛选模式:

模式 A:标签索引模式(推荐)
配合 api-test-tagger 打好的标签,按维度筛选:

  • 按模块:--module auth,order
  • 按优先级:--priority P0,P1
  • 按场景:--tag scene:positive
  • 按策略:--scope smoke

模式 B:文件路径回退模式
没有标签?也能用。按文件名匹配模块,按方法名关键字推断场景。

模式 C:自然语言解析模式
最直观,说话即可。

好处是:执行范围不再写死,可以按业务需要灵活组合。今天跑冒烟、明天跑回归、后天只跑支付模块——一条指令搞定。

③ 结构化输出:结果不再散落

执行完了,结果怎么收集?这是很多团队的痛点。

api-test-executor 会同时输出三种结果:

1. execution_results.json(给下游消费)

结构化的执行结果,包含每条用例的状态、耗时、错误信息、请求/响应快照。这是后续诊断、报告生成、数据归档的基础数据。

2. execution_summary.md(给人看)

人能直接读的执行摘要,包含执行概览和失败用例列表。

3. pytest 原生报告(兼容生态)

  • allure-results/:Allure 原始数据
  • html-report/report.html:HTML 测试报告
  • junit.xml:JUnit XML 格式

也就是说,它既能让下游 Skill 接管(结构化 JSON),又能兼容你已有的报告工具链(Allure/HTML/JUnit)。这一点对老项目迁移特别友好。

④ 能力边界:只做该做的事

这点其实是它最被低估的优势。

明确不做的事

  • 不做复杂的环境健康自检(仅做基础服务连通性检查)
  • 不做分布式并发调度(仅支持本地 pytest-xdist 并发)
  • 不做实时监控告警
  • 不做失败根因分析(交给下游 api-failure-diagnoser)

为什么不做?

因为一个试图包揽所有的 Skill,最终什么都会做不好。环境巡检、分布式调度、根因分析——每一项都是独立的复杂领域,强行塞进执行 Skill 里,只会让它臃肿、脆弱、难维护。

api-test-executor 把"触发 + 筛选 + 收集"这三件事做到极致,把更重的能力留给底层平台或独立的 Skill——这种克制反而让它更稳定、更专注、更好用

⑤ 生态衔接:可独立、可编排

api-test-executor 不是孤岛,它是一整套 Skill 体系的核心节点:

  • 上游api-test-tagger 给脚本打标签,让它能精准筛选
  • 下游api-failure-diagnoser 接收执行结果,自动诊断失败、修复脚本
  • 下游api-testdata-cleaner 在执行后清理测试数据
  • 下游api-report-generator 基于执行结果生成可视化报告
  • 编排api-pipeline-scheduler 把这些 Skill 串成流水线,一键跑通全流程

也就是说,它既能独立使用,又能作为整条流水线的核心节点——这就是它作为"发动机"的真正价值。

三、几个典型使用场景

场景一:日常冒烟测试

每天早上来公司,想快速验证服务是否正常:

在 test 环境跑一下冒烟测试

几分钟出结果,喝杯咖啡的功夫就知道今天服务是不是健康的。

场景二:版本前的 P0 回归

发版前,要跑一遍所有核心用例:

在 test 环境跑一下 shop-lab-api-test 项目 P0 级测试用例

它会自动扫描出 87 条 P0 用例,覆盖 49 个文件,按 4 线程并发执行,失败重试 2 次,全程无需人工配置。

场景三:调试单个模块

开发刚改了订单接口,想快速验证:

在 test 环境跑一下订单模块的所有用例

不用翻代码找文件名,不用拼 -k 表达式,一句话搞定。

场景四:模拟执行(dry-run)

想看看某类用例有多少条、覆盖了哪些文件,又不想真跑:

模拟执行一下,看看支付模块有哪些正向场景用例

它会列出用例清单,但不真正执行——这个功能在评估测试覆盖范围时特别有用

场景五:接入 CI/CD 流水线

通过 Claude CLI 的非交互模式,可以无缝接入 Jenkins:

claude -p "调用 api-test-executor 技能,参数: project_path=${PROJECT_PATH}, env=test, scope=p0" \
  --permission-mode bypassPermissions \
  --output-format json \
  --max-turns 30

让接口测试真正成为流水线的一环。

五、适合谁用?

强烈推荐

  • 接口自动化测试工程师:日常跑用例、做回归、出报告
  • 测试开发工程师:搭建团队测试基础设施、接入 CI/CD
  • 全栈测试工程师:希望降低自动化使用门槛
  • 测试团队负责人:希望提升团队测试执行效率

特别适合

  • 已有 pytest 测试脚本的团队(迁移成本低)
  • 希望用 AI 但不知道从哪里下手的团队(这是最好的切入点)
  • 测试用例数量多、模块复杂的团队(标签筛选价值最大)

六、如何获取和安装?

在AI 进化社内,下载获取api-test-executor 技能包。

安装到 WorkBuddy

cp -r skills/api-test-executor ~/.workbuddy/skills/

安装到 Claude Code

cp -r skills/api-test-executor ~/.claude/skills/

安装完成后,在你的 AI 工具里直接说:

"在 test 环境跑一下 xxx 项目的冒烟测试"

就可以开始用了。

小贴士:建议先配合 api-test-tagger 给脚本打上标准化标签,这样筛选效果最佳。

七、实战演示

1、首先,利用api-testscript-generator 技能 为被测项目shop-lab一键生成好测试脚本,比如生成好的项目脚本目录为:shop-lab-api-test (之前有文章分享过,此处不再重复)

2、将测试脚本项目下的config配置目录中test.yaml配置文件更换成被测项目真实地址,如下图,按需修改:

3、打开任意Agent,比如WorkBuddy,在技能列表中,选择 api-test-executor 技能,传入测试脚本项目目录和环境配置:

在 test 环境跑一下shop-lab-api-test 项目登录模块的冒烟测试

4、收到上述执行提示词后,技能会进行自动解析成测试框架能理解的执行意图,最终将执行翻译为:test 环境,冒烟测试,登录模块(auth),4 线程并发,失败重试 2 次,并询问用户是否确认。

这里可能有人会问,老师:"在上面的执行意图中,我们并没有明确要求配置4个线程并发,失败重试2次的要求啊“,那为什么在意图解析时,会出现这种执行要求呢?

这是因为api-test-executor技能中CLI命令行参数内置了默认值,如下图所示:

选择确认执行。

WorkBuddy 会加载 api-test-executor 技能,自动完成以下流程:

1)、环境自检:检查 localhost:8080 服务是否可用、数据库连接是否正常;

2)、执行范围解析:扫描 testcases/ 目录,识别对应要求待执行的测试用例集;

3)、解发pytest执行: 运行脚本组装并执行 pytest 命令。

4)、结果收集:生成 execution_summary.md 执行结果汇总文件。

如果需要在Claude Code中调用api-test-executor,可以直接下载该技能源码或在线安装,也可以选择将workbuddy中对应的技能迁移到claude code目录下。

进入到Claude Code中,输入/api-test-executor

/api-test-executor 在 test 环境跑一下shop-lab-api-test 项目登录模块的冒烟测试
shop-lab-api-test路径为:xxx

执行结果:

从上述执行结果可以看到,本次用例执行有成功也有失败,这才符合接口测试执行的常规表现。

我们重点来看这条失败用例test_register_success,这是一个非常典型的数据污染问题。

脚本里把用户名newuser_001写死在了代码中,上一轮运行时这个账号就已经完成注册,再次执行脚本,接口检测到账号重复,直接返回异常,造成用例运行失败。

针对这类脚本数据污染的问题,不要慌,我们可以调用失败用例智能诊断技能:api-failure-diagnoser来自动修复一下,当然这个技能,篇符关系,我们就留在下一篇再讲吧。

写在最后

测试行业有句老话:"自动化测试的难点不在写脚本,而在跑脚本、看结果、修失败。"

api-test-executor 解决的就是这三个难点中最关键的一环——让脚本能"听话地跑起来"

它不会替代你的测试策略思考,不会替代你的业务理解,更不会替代你对质量的整体把控。它只是把你从机械的执行调度、繁琐的命令参数、散落的结果文件中解放出来,让你把精力聚焦在更有价值的事情上——测试策略优化、风险深度挖掘、质量趋势分析

而这,正是 AI 赋能测试的真正意义——不是替代人,而是解放人。

如果你也厌倦了每次跑测试都要折腾半天,强烈推荐试试这款 skill。