最近在折腾 AI 做点自动化测试,说点真实感受

2026-04-29 11:221阅读0评论SEO问题
  • 内容介绍
  • 文章标签
  • 相关推荐
问题描述:

最近这段时间在折腾点 AI 相关的东西,主要还是想往测试这块用一下,比如自动生成用例、接口校验、还有一些简单的回归判断之类的。
一开始其实想得挺美的,觉得是不是可以省掉一部分重复性的测试工作,尤其是那种改来改去的接口、文档一变就要重新梳理用例的场景。
实际用下来感觉有点复杂。

先说好的地方。
有些场景确实能提效,比如:
给一段接口定义或者简单业务描述,让它帮你列测试点,这个还行,至少能当个补充。有时候能想到一些你没第一时间注意到的边界情况。
还有日志分析这块,比如一堆报错堆在那,让它帮你归归类、总结一下,也能省点时间。

但问题也挺明显的。
最直接的一个:它其实不太理解“上下文”
比如同一个接口,在不同业务场景下,校验逻辑是不一样的,但AI有时候会给你一套“看起来很完整,但其实不太对”的用例。
如果你不自己过一遍,很容易被带偏。

还有一个比较明显的是:稳定性不太行
同样一段输入,有时候输出还不太一样,尤其是你指望它去做那种“严格校验”的事情,就会有点难受。
现在我这边基本不太敢让它直接参与“决策”,更多还是当个辅助,比如:

  • 帮忙发散测试点
  • 帮忙整理日志
  • 或者生成个初版,再自己改
    另外一个感受是,其实它更像一个“刚入行但还挺积极的人”。
    你让它干活,它会给你很多东西,但你得自己判断哪些是有用的,哪些是瞎说的。

现在整体感觉就是:
能用,但别太信;能省点时间,但也会带来新的坑。
有点像之前刚上自动化测试那会儿,一开始也觉得能解放生产力,结果发现维护成本也不低。

不太确定是不是我用的姿势不对,或者这个阶段本来就这样。
有在一线用AI做测试或者自动化的么,大家现在都用到什么程度了?还是说大部分也就是当个辅助工具在用。

阅读全文
标签:软件开发
问题描述:

最近这段时间在折腾点 AI 相关的东西,主要还是想往测试这块用一下,比如自动生成用例、接口校验、还有一些简单的回归判断之类的。
一开始其实想得挺美的,觉得是不是可以省掉一部分重复性的测试工作,尤其是那种改来改去的接口、文档一变就要重新梳理用例的场景。
实际用下来感觉有点复杂。

先说好的地方。
有些场景确实能提效,比如:
给一段接口定义或者简单业务描述,让它帮你列测试点,这个还行,至少能当个补充。有时候能想到一些你没第一时间注意到的边界情况。
还有日志分析这块,比如一堆报错堆在那,让它帮你归归类、总结一下,也能省点时间。

但问题也挺明显的。
最直接的一个:它其实不太理解“上下文”
比如同一个接口,在不同业务场景下,校验逻辑是不一样的,但AI有时候会给你一套“看起来很完整,但其实不太对”的用例。
如果你不自己过一遍,很容易被带偏。

还有一个比较明显的是:稳定性不太行
同样一段输入,有时候输出还不太一样,尤其是你指望它去做那种“严格校验”的事情,就会有点难受。
现在我这边基本不太敢让它直接参与“决策”,更多还是当个辅助,比如:

  • 帮忙发散测试点
  • 帮忙整理日志
  • 或者生成个初版,再自己改
    另外一个感受是,其实它更像一个“刚入行但还挺积极的人”。
    你让它干活,它会给你很多东西,但你得自己判断哪些是有用的,哪些是瞎说的。

现在整体感觉就是:
能用,但别太信;能省点时间,但也会带来新的坑。
有点像之前刚上自动化测试那会儿,一开始也觉得能解放生产力,结果发现维护成本也不低。

不太确定是不是我用的姿势不对,或者这个阶段本来就这样。
有在一线用AI做测试或者自动化的么,大家现在都用到什么程度了?还是说大部分也就是当个辅助工具在用。

阅读全文
标签:软件开发