- Anthropic 7人团队5个月自研Scion版本系统,应对AI Agent日均3万次提交冲击。本文从测试/测开视角,剖析CI流水线、合并校验与质量防护体系在AI编码时代的全新挑战,为国内研发质量团队提供前瞻性实践参考。 Anthropic 7人团队5个月自研Scion版本系统,应对AI Agent日均3万次提交冲击。本文从测试/测开视角,剖析CI流水线、合并校验与质量防护体系在AI编码时代的全新挑战,为国内研发质量团队提供前瞻性实践参考。
- Playwright v1.64 新增实验性 WebMCP 测试能力:`page.webmcp.tools()` 可枚举页面向智能体注册的工具,`callTool()` 支持直调验证。需启用 `--enable-features=WebMCP`,目前仅 Chromium 等主流内核部分支持。填补了传统测试无法覆盖的“机器可读工具面板”盲区,助力智能体能力契约化回归。 Playwright v1.64 新增实验性 WebMCP 测试能力:`page.webmcp.tools()` 可枚举页面向智能体注册的工具,`callTool()` 支持直调验证。需启用 `--enable-features=WebMCP`,目前仅 Chromium 等主流内核部分支持。填补了传统测试无法覆盖的“机器可读工具面板”盲区,助力智能体能力契约化回归。
- 本文介绍如何用腾讯WorkBuddy Skills打造“测试用例质量评审助手”:通过SKILL.md固化5项评审标准(需求追溯、边界覆盖、前置条件等),结合故意设错的登录用例验证AI能否精准识别漏边界、模糊预期等问题,并强调需系统评测召回率与精确率——让AI评审可衡量、可迭代、可信赖。 本文介绍如何用腾讯WorkBuddy Skills打造“测试用例质量评审助手”:通过SKILL.md固化5项评审标准(需求追溯、边界覆盖、前置条件等),结合故意设错的登录用例验证AI能否精准识别漏边界、模糊预期等问题,并强调需系统评测召回率与精确率——让AI评审可衡量、可迭代、可信赖。
- 微软提出Agent Experience(AX)方法,指出Agent出错常源于产品知识面缺陷,而非模型本身。测试需沿“发现—加载—调用—应用”四段轨迹归因,精准定位该修文档、扩展、示例或提示词,推动SDK、认证、脚手架等全链路协同演进。 微软提出Agent Experience(AX)方法,指出Agent出错常源于产品知识面缺陷,而非模型本身。测试需沿“发现—加载—调用—应用”四段轨迹归因,精准定位该修文档、扩展、示例或提示词,推动SDK、认证、脚手架等全链路协同演进。
- 本文以腾讯WorkBuddy为实践工具,通过一份登录需求,系统讲解软件测试新人必备的5种核心能力:需求分析、等价类与边界值设计、需求歧义评审、测试用例质量评审、结果验证逻辑。强调AI是辅助工具,真正关键的是测试思维与基本功。 本文以腾讯WorkBuddy为实践工具,通过一份登录需求,系统讲解软件测试新人必备的5种核心能力:需求分析、等价类与边界值设计、需求歧义评审、测试用例质量评审、结果验证逻辑。强调AI是辅助工具,真正关键的是测试思维与基本功。
- 本文介绍基于Arize Phoenix的AI回归测试方法:通过固定数据集、评测器与运行环境,用四格矩阵解耦模型/Prompt/检索器的组合变化,结合均值与坏例分析、交互效应识别、Judge校准及成本-质量双门禁,实现可复现、可归因、可审计的发布决策。 本文介绍基于Arize Phoenix的AI回归测试方法:通过固定数据集、评测器与运行环境,用四格矩阵解耦模型/Prompt/检索器的组合变化,结合均值与坏例分析、交互效应识别、Judge校准及成本-质量双门禁,实现可复现、可归因、可审计的发布决策。
- NVIDIA OpenShell通过内核级隔离与外部策略引擎实现文件、网络、凭据及策略四维管控,但“启用沙箱”不等于安全。验收须聚焦四大入口的正反测试、拒绝后行为追踪、热更新竞态、会话残留清理,并以可审计、可撤销、抗绕行作为核心验证标准。 NVIDIA OpenShell通过内核级隔离与外部策略引擎实现文件、网络、凭据及策略四维管控,但“启用沙箱”不等于安全。验收须聚焦四大入口的正反测试、拒绝后行为追踪、热更新竞态、会话残留清理,并以可审计、可撤销、抗绕行作为核心验证标准。
- 语音Agent的“打断”是涵盖VAD识别、响应取消、播放停止、工具终止与上下文清理的完整链路。仅测转写准确率易漏掉重复播报、误提交或后台静默执行等高危问题。需从声音、语义、副作用三层断言,确保用户随时重获控制权。 语音Agent的“打断”是涵盖VAD识别、响应取消、播放停止、工具终止与上下文清理的完整链路。仅测转写准确率易漏掉重复播报、误提交或后台静默执行等高危问题。需从声音、语义、副作用三层断言,确保用户随时重获控制权。
- 官方ADK明确:真实感(用户模拟)与精确断言(期望轨迹)互斥,不可共存于同一评估集。必须拆分为两套——固定轨迹集(人工写死输入+硬断言,用于门禁)和模拟用户集(AI生成话术+任务/安全判据,用于探针),各司其职,方保评估有效可靠。 官方ADK明确:真实感(用户模拟)与精确断言(期望轨迹)互斥,不可共存于同一评估集。必须拆分为两套——固定轨迹集(人工写死输入+硬断言,用于门禁)和模拟用户集(AI生成话术+任务/安全判据,用于探针),各司其职,方保评估有效可靠。
- 摘要:用OpenTelemetry语义约定作为共同语言,再把会话、工具、业务与回归证据分层。OpenTelemetry的语义约定正在为GenAI和MCP等场景定义统一的属性、Span与事件表达,包括模型调用、工具参数、工具类型等。它解决的是“不同组件怎样用共同语言记录”,不是自动告诉团队一次Agent运行究竟该不该通过。把这个机制放进客服Agent,可以构造一条典型Trace:用户要求取消订... 摘要:用OpenTelemetry语义约定作为共同语言,再把会话、工具、业务与回归证据分层。OpenTelemetry的语义约定正在为GenAI和MCP等场景定义统一的属性、Span与事件表达,包括模型调用、工具参数、工具类型等。它解决的是“不同组件怎样用共同语言记录”,不是自动告诉团队一次Agent运行究竟该不该通过。把这个机制放进客服Agent,可以构造一条典型Trace:用户要求取消订...
- Cloudflare提出Agent评测需环境一致性:通过文件系统快照固定代码、依赖、工具、数据、网络及运行策略六类变量,避免环境漂移干扰结果,确保模型对比真实可信。 Cloudflare提出Agent评测需环境一致性:通过文件系统快照固定代码、依赖、工具、数据、网络及运行策略六类变量,避免环境漂移干扰结果,确保模型对比真实可信。
- 本文借鉴Google夜间自主优化实践,提出AI代码优化的“五道门禁”机制:任务边界冻结、环境指纹追踪、越界优先审查、独立验证与人工聚焦差异。强调无人值守≠无人验收,通过证据评分卡保障正确性、可复现性与风险可控,助力测试团队安全落地AI辅助研发。 本文借鉴Google夜间自主优化实践,提出AI代码优化的“五道门禁”机制:任务边界冻结、环境指纹追踪、越界优先审查、独立验证与人工聚焦差异。强调无人值守≠无人验收,通过证据评分卡保障正确性、可复现性与风险可控,助力测试团队安全落地AI辅助研发。
- 本文基于Cloudflare Browser工具文档,提出三层证据排查法:一验页面真实性(URL+指纹),二查业务就绪性(接口、状态、节点可用),三证动作准确性(视觉/DOM/坐标+后端副作用)。强调结构化Trace、会话污染测试与高风险动作沙箱验证,避免盲目调优模型。 本文基于Cloudflare Browser工具文档,提出三层证据排查法:一验页面真实性(URL+指纹),二查业务就绪性(接口、状态、节点可用),三证动作准确性(视觉/DOM/坐标+后端副作用)。强调结构化Trace、会话污染测试与高风险动作沙箱验证,避免盲目调优模型。
- 上个月,团队里一个测试新人跑来找我,表情有点委屈。“哥,我在项目里放了一个 SKILL.md,为什么 Claude Code 还是不会干活?”我让他把文件打开。里面写着一段话:“你是资深测试工程师,请帮我生成测试用例,覆盖正常和异常场景。”我看完就笑了。我说:“你这不是 Skill,是许愿。”他愣了一下:“SKILL.md 不就是写提示词吗?”这是大多数测试人刚接触 Agent Skills... 上个月,团队里一个测试新人跑来找我,表情有点委屈。“哥,我在项目里放了一个 SKILL.md,为什么 Claude Code 还是不会干活?”我让他把文件打开。里面写着一段话:“你是资深测试工程师,请帮我生成测试用例,覆盖正常和异常场景。”我看完就笑了。我说:“你这不是 Skill,是许愿。”他愣了一下:“SKILL.md 不就是写提示词吗?”这是大多数测试人刚接触 Agent Skills...
- 本文基于阿里公开资料,将自然语言购物需求拆解为商品、报价、确认、订单、支付、异步结果六段可验证证据,提出行为断言、异常测试矩阵与持续回归方案,确保AI购物严格遵循用户授权——买对商品、付对金额、只付一次、全程可溯。 本文基于阿里公开资料,将自然语言购物需求拆解为商品、报价、确认、订单、支付、异步结果六段可验证证据,提出行为断言、异常测试矩阵与持续回归方案,确保AI购物严格遵循用户授权——买对商品、付对金额、只付一次、全程可溯。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签