这是什么网站?
Testsy 是面向 AI 编码场景的自动化质量检测服务:你用自然语言说明「该怎么操作、结束时界面必须怎样」,它会在真实浏览器或指定版本的 iPhone / iPad / Android 设备上执行,并返回可回放的证据。它不读源码,只从用户可见界面取值判定,适合给会自我确认的编码 Agent 提供外部验证,而不是替代传统脚本框架做全量覆盖。
核心功能
- 用自然语言描述流程与断言,生成可读步骤与检查项后再执行
- 在 Chrome 或选定系统版本的设备环境中跑 Web / iOS / Android
- 每次运行给出 passed / failed / blocked / inconclusive,并附期望值与实际值
- 回放、视频、截图、控制台与网络结果可复制成修复提示给编码 Agent
- 提供 MCP、CLI、REST API 与 CI 集成,便于计划、保存与重跑测试
- 注册类流程可配独立邮箱;付费方案还可配短信与通话号码
常见使用场景
- 用 Lovable、Bolt、Replit 或 v0 搭出预览站后,粘贴地址跑注册、结账等关键路径,用界面结果核对,而不是只听 Agent 说「修好了」
- 在 Cursor / Claude Code / Codex 接入 MCP 后,改完功能立刻重跑已保存测试,确认局部改动有没有连带破坏优惠券、登录等流程
- 小团队把登录、邮件确认、短信验证码做成可重复项,在每次部署后从 CI 拉起,并导出 JUnit / JSON
- 需要在指定 iOS / Android 版本上看界面时,上传构建并用自然语言描述交互,核对屏幕上的文案与数值
适合哪些用户?
- 用 AI 快速生成网站或应用、但缺少独立 QA 的独立开发者与小型团队
- 希望编码 Agent 在提 PR 前用外部证据自检关键路径的工程师
- 需要同时覆盖 Web 与移动端,并核对邮件 / 短信收件行为的产品负责人
- 不太适合:已有成熟选择器脚本体系、主要做 API / 性能压测、或不接受按次计费与单次运行时长上限的团队
与同类工具的对比?
与其拿它和传统脚本框架比「谁更全」,不如按下面几条判断是否匹配:
- 输入方式:偏自然语言与 Agent / MCP 驱动,还是手写选择器与测试代码
- 判定证据:是否需要期望值 / 实际值、回放定位,以及明确区分 blocked(被验证码或登录墙挡住时不当成产品缺陷)
- 覆盖面:是否需要 Web + 选定系统版本的 iOS / Android,以及独立邮箱 / 短信通路
- 计费形态:按「一次测试 × 一个平台」计次,并设有单次运行时长上限;一次性试用额度用完后进入付费档
客户怎么说
- AI 应用搭建者常遇到:Agent 声称注册完成,界面问候语却是空值;对照回放里的期望值与实际值后,更容易把缺陷交回 Agent 修
- 小团队工程师会把已保存测试挂在部署后:改定价页这类局部变动时,能先发现结账优惠金额不对,再决定是否合并
- 做移动端验证的人更看重在指定系统版本上核对短信验证码与邮件确认,而不用自建整套设备矩阵
- 若工作流高度依赖自维护 Playwright / Appium 脚本库,或测试量远超按次套餐,这类自然语言 QA 更适合补关键路径,而不是替换现有体系
常见问题
Q: Testsy 和自己写自动化脚本有什么不同?
A: 它面向自然语言描述与界面取值证据,侧重给编码 Agent 做外部验证;传统脚本更适合长期、细粒度、高度定制的回归库。
Q: 一次 run 怎么计?
A: 官网说明:一条测试在一个平台上执行计为一次;同一测试在 Web 与 Android 各跑一次计两次;被站点挡住导致 blocked 的运行不计费。
Q: 免费试用包含什么?
A: 一次性 10 次运行、一个项目、同时仅一个 Web 或 App 运行;Web / iOS / Android 都可用,通常无需绑卡。
Q: 能否测需要登录的页面?
A: 可以在项目中预先保存登录账号并在测试中引用;密码不会写进测试正文,也不会出现在结果里。



















