如何测试一个你不理解的系统?从“不懂”开始的测试方法
面对一个完全陌生的系统,测试人员应该从哪里开始?结合 Kim Muncey 在 MoTaverse 的分享,聊聊如何通过好奇心、信息缺口、风险分析和 AI 辅助逐步理解并测试陌生系统。
质量分析师,而非质量保证师。
面对一个完全陌生的系统,测试人员应该从哪里开始?结合 Kim Muncey 在 MoTaverse 的分享,聊聊如何通过好奇心、信息缺口、风险分析和 AI 辅助逐步理解并测试陌生系统。
业务规则提取实战指南:从业务材料中识别角色、条件、决策、例外、状态和证据。
需求可追溯性分析双语指南,映射需求、验收、设计、代码、测试、缺陷和验证证据,并区分关系类型与覆盖状态。
DeepSeek Harness 官方桌面端预览版现已可以从官网下载安装;dsh-qa v0.7.2 已支持 dsh-v0.2.0-rc.2 宿主冒烟测试,并修复历史 DSH 对话的发现、排序、保留和展示问题。
把 Agent Skill 拆成 SKILL.md、metadata、引用资源和 Runtime 链路,说明为什么 Skill 不等于一份入口文档。
需求冲突检测双语指南,保留互斥规则的来源、条件和适用范围,把最终优先级决定留给负责人。
需求一致性分析双语指南,比较需求材料中的术语、标识符、格式、状态、规则、行为、范围和证据状态。
从 SKILL.md 合法、Agent 能触发到真实运行结果,说明为什么 Agent Skill 需要完整的质量工程和证据边界。
需求歧义分析双语指南,识别角色、范围、数量、条件、时间、状态和验收标准中的歧义,但不替业务选择解释。
使用需求质量复核 Skill,在设计和测试前审计需求的完整性、清晰度、可验证性、可行性、范围和证据质量,并产出可追踪的 RQ-## 发现。
围绕客服摘要模型设计代表性任务集、评分量表和回归门禁,并校准评审器、区分离线质量与线上业务指标。
从事实准确性、引用依据、拒答、隐私、时延和成本设计大模型测试,并固定模型参数、重复运行以评估随机输出。