-
约束与限制 介绍测试计划服务中的使用限制,如表1所示。 表1 测试计划使用限制说明 指标类别 指标项 限制说明 浏览器 类型 目前测试计划服务适配的主流浏览器类型包括: Chrome浏览器:支持和测试最新的3个稳定版本 Firefox浏览器:支持和测试最新的3个稳定版本 Edge浏览器:Win10默认浏览器,支持和测试最新的3个稳定版本 推荐使用Chrome、Firefox浏览器,效果会更好。 分辨率 分辨率大小 推荐使用1280*1024以上。 单个项目使用限制 单版本最大支持测试用例数(个) 不同套餐规格不同。具体可参考CodeArts套餐规格特性差异、测试计划服务包年/包月套餐特性差异。 CodeArts套餐差异: 体验版、基础版:3000个 专业版、企业版:10000个 测试计划服务套餐差异: 基础版:3000个 专业版:10000个 单项目最大支持版本数(包含基线) 不同套餐规格不同。具体可参考CodeArts套餐规格特性差异、测试计划服务包年/包月套餐特性差异。 CodeArts套餐差异: 体验版、基础版:1个 专业版、企业版:50个 测试计划服务套餐差异: 基础版:1个 专业版:50个 单个附件大小(M) 10 单个测试用例关联标签(个) 10 单个项目最大目录个数(个) 15000 单个需求最大关联用例数(个) 不同套餐规格不同。具体可参考CodeArts套餐规格特性差异、测试计划服务包年/包月套餐特性差异。 CodeArts套餐差异: 体验版、基础版:3000个 专业版、企业版:10000个 测试计划服务套餐差异: 基础版:3000个 专业版:10000个 单个测试计划关联需求数(个) 300 单个测试计划可添加的用例数(个) 35000 手工测试用例自定义状态个数(个) 10 手工测试用例自定义结果个数(个) 10 手工测试套自定义状态个数(个) 10 手工测试套自定义结果个数(个) 10 单个手工测试用例最大执行数 10000 单项目接口自动化环境参数环境个数 50 接口自动化环境参数单个环境下参数个数 50 接口测试单个任务执行时长(分钟) 10 单个手工测试套件关联用例数(个) 3000 单个接口自动化测试套件关联用例数(个) 150 单项目测试套件个数上限 10000 单项目最大思维导图数(个) 10000 思维导图节点广度上限 40 思维导图最大上传文件图片大小(M) 20 思维导图最大支持导入Xmind文件大小(M) 20 思维导图批量归档用例数上限(个) 500 测试因子中心最大因子数(个) 5000 测试因子中心最大目录数(个) 1000 测试因子中心最大目录层级深度 10
-
购买须知 在CodeArts支持的区域内,各区域独立购买、独立计费。 您可以购买测试计划单服务套餐,或者开通/购买软件开发生产线服务组合套餐,体验一站式、全流程、安全可信的软件开发生产线。 购买测试计划服务需要您拥有租户账号,或拥有Tenant Administrator权限的
IAM 用户账号,配置权限策略方法请参考创建用户组并授权。 若已经购买了CodeArts套餐,则不能再单独购买测试计划服务。
-
变更CodeArts TestPlan套餐规格 CodeArts TestPlan支持变更套餐规格,变更影响请参见变更配置后对计费的影响。 登录测试计划服务控制台。 找到CodeArts TestPlan套餐,单击操作列中的“变更”。 根据需要选择变更商品、变更类型,勾选同意声明,单击“下一步:确认订单”。 若变更类型选择“续费变更”,则还需要选择续费时长。 确认订单内容:若需要修改,单击“上一步”;若确认无误,单击“下一步”。 根据页面提示完成支付。
-
规则说明 2020年10月16日前,未在CodeArts某个区域下产生过费用的用户,按照新版计费规则,需在该区域开通/购买CodeArts或单独购买测试计划服务后使用。 在该区域内产生过费用的用户,延续旧版计费规则,可参考购买服务在该区域开通测试计划服务包年/包月套餐。 例如: 用户于2020年3月在“华北-北京四”购买了半年期的包月套餐,套餐到期后关闭了CodeArts服务;2020年10月20日将重新启用CodeArts。 若用户仍使用“华北-北京四”,可以购买旧版套餐使用。 若用户使用其它区域,则需购买CodeArts或者测试计划服务新版计费。
-
用例设计 完成测试点设计后,可以进一步细化成用例。 用例包括预置条件、步骤、预期结果三个部分,进行用例设计时分别设置这三部分内容。 进入已创建的思维导图。 在“注册会员”节点下按需新建子节点预置条件、步骤、预期结果,根据需要新建子节点。 选中作为预置条件的节点,单击思维导图上方工具栏中。 当节点中出现时,说明设置成功。 选中作为步骤的节点,单击思维导图上方工具栏中。 当节点中出现时,说明设置成功。 选中作为预期结果的节点,单击思维导图上方工具栏中。 当节点中出现时,说明设置成功。
-
归档用例 将生成的用例归档后,在测试用例页面可找到对应用例记录。 在思维导图中,选中已生成用例的节点,鼠标右键单击该节点,在下拉列表中选择“归档用例”。 在弹框中,在左侧勾选需要归档的用例,单击页面右侧的下拉列表,选择版本、需要存放的用例库/测试计划、执行方式,关联需求并选择特性目录,单击“确认”。 当节点中出现时,说明操作成功,在“测试用例”页面可搜到该用例。 单击,页面将跳转至测试用例详情页。
-
生成用例 完成用例设计后,可将思维导图生成一条真正的测试用例。 生成单个用例 在思维导图中,选中待生成用例的TP节点,鼠标右键单击该节点,在下拉列表中选择“生成用例”。 当节点中出现时,说明操作成功,此时生成的是草稿用例。 单击,页面右侧将滑出用例详情。 用户可以根据需要设置是否按一个步骤对应一个预期结果,请参考功能开关。 生成测试步骤时,只读取打上TP标签节点的第一层子节点,顺序根据ST的标签按照从上到下,依次递增。 若ST标签没有设置EX预期结果,对应序号的预期结果为空。 如果在测试步骤节点下标注了多个预期结果,只读取第一个。 批量生成用例 当一个场景下设置了多个测试点,可以通过场景批量生成草稿用例。 在思维导图中,选中含有多个测试点的场景。 鼠标右键单击该节点,在下拉列表中选择“生成用例”。 此场景节点包含的全部测试点节点均出现,变成草稿用例。
-
删除思维导图中已经归档的测试用例 鼠标右键单击已生成用例的带测试点的节点。 在下拉栏中,单击“删除用例”。 用户在弹框中可以勾选以下提示信息: 不同步删除测试用例中的用例:只删除思维导图中生成的用例格式,在CodeArts TestPlan中的测试用例列表里将保留已生成的用例。 测试用例中用例打“已废弃”标签:在手工测试用例列表中,单击目标用例名称,可以看到基本信息里已标记“已废弃”。 同步删除用例库和测试计划下的用例,删除后用例与测试套、需求、缺陷的关联关系无法恢复。 在文本框内输入“DELETE”,单击“确定”。
-
绘制思维导图 完成新建思维导图操作后,在“测试设计”页面单击需要编辑的思维导图名称,即可进行思维导图的绘制。 新增节点 新增节点包括新增邻节点(即同级节点)与新增子节点。选中思维导图中任一节点,可根据需要选择新增节点的类型。根节点只能新增子节点,其它节点可以新增邻节点和子节点。 新增子节点 进入已创建的思维导图,选中任意节点,通过以下方式新增子节点。 单击鼠标右键,在页面下拉列表中选择“新增子节点(Ins)”。 单击键盘上的“Insert”或“Tab”。 新增邻节点 进入已创建的思维导图,选中除根节点外的任意节点,通过以下方式新增邻节点。 单击鼠标右键,在页面下拉列表中选择“新增邻节点(Enter)”。 单击键盘上的“Enter”。 删除节点 在思维导图中可删除根节点以外的任意节点,若被删除的节点含有子节点,那么子节点也会随之删除。 进入已创建的思维导图,选中除根节点外的任意节点,通过以下方式删除节点。 敲击鼠标右键,在页面下拉列表中选择“删除节点(Del)”。 单击页面右上方,并在下拉列表中选择“删除当前节点”。 使用快捷键:敲击键盘上的“Delete”。 移动节点 上移/下移 进入已创建的思维导图,选中待移动节点,单击思维导图上方工具栏中或,可在同级之间上下移动节点。 拖拽节点 进入已创建的思维导图,选中待移动节点,鼠标左键单击节点不松开,拖拽到需要的位置,松开鼠标左键。 显示层级数 在思维导图中,用户可以指定展开的节点层级。 单击鼠标右键,在页面下拉列表中选择“显示层级数”,单击目标层数。
-
Kafka认证说明 认证模式:用户在KafkaProducer关键字配置了SASL Username、SASL Password、Truststore、Truststore Password参数,对接Kafka为有认证模式,使用认证协议SASL_SSL,提供了数据传输的加密,也能确保客户端的身份认证。 无认证模式:用户在KafkaProducer关键字没有配置了SASL Username、SASL Password、Truststore、Truststore Password参数,对接Kafka为无认证模式,使用默认协议PLAINTEXT,不使用任何加密或认证机制,在这种模式下,客户端与服务器之间的通信是明文的,不提供任何安全保障。
-
KafkaConsumer简介 该系统关键字支持对Kafka的消费者进行测试。 参数 是否必选 参数类型 默认值 描述 Broker 是 String 127.0.0.1:9093 Kafka实例ip地址。 Topic 是 String - Kafka消息的主题。 Consumer Group 是 String - Kafka消息消费组。 SASL Username 否 String - Kafka SASL 权限认证配置用户名。 SASL Password 否 String - Kafka SASL 权限认证配置密码。 Truststore 否 File - Kafka客户端证书。 Truststore Password 否 String - Kafka客户端证书密码。
-
测试报告总览 单击报告名称,默认进入测试报告的总览页面。总览页面展示了所选测试计划的相关测试数据情况。 报告项 说明 需求覆盖率 需求覆盖率反映功能点测试覆盖情况,统计所选计划关联的所有需求的测试覆盖率。需求覆盖率 = 已完成数/需求总数。 项目总遗留DI 统计此版本所有的遗留缺陷所算出的DI值。 说明: 所有缺陷按照严重等级进行计算。 每个缺陷DI值对应类型如下:提示:0.1 一般:1 严重(重要):3 致命(关键):10 新增DI 统计此测试计划所关联的遗留缺陷所算出的DI值。 用例执行率 统计用例的执行情况。用例执行率 = 计划内执行有执行结果的用例数量/计划内所有用例数量。 用例自动化率 非手工测试用例占所有用例数的比例,用例自动化率=(测试计划所有的用例总数-测试计划内手工测试用例数)/测试计划所有的用例总数。 用例有效性比例 发现缺陷的测试执行用例占所有测试执行用例的百分比,用例有效性比例=发现缺陷的测试执行用例数量/测试执行用例数量。 需求通过情况 需求所关联的测试用例结果都为成功时,当前需求为已通过。需求通过率=已通过需求数/需求总数。 用例通过情况 用例通过率反映产品质量,统计选中的计划下所有用例的通过率,并按用例的结果分组统计,未执行的用例计入“未执行”分组。用例通过率=成功数/总数 缺陷严重程度 显示选中的计划下关联的缺陷数量。 自动化率 通过饼图以及详细的用例数量进行展示。 非手工测试用例占所有用例数的比例,用例自动化率=(测试计划所有的用例总数-测试计划内手工测试用例数)/测试计划所有的用例总数。 各测试类型的用例通过率 显示不同测试类型的用例通过率。 缺陷按照模块分布情况 按照模块显示对应的缺陷数量。
-
风险评估 用户可以在风险评估界面中,配置“质量属性评估”和“风险分析”信息,也可以自定义模块输入相关报告信息。 质量属性评估 在顶部选择测试类型,单击文本框区域,输入评估信息,单击“保存”完成创建。 风险分析 用户可以根据测试进展评估风险,单击文本框区域,输入风险分析的信息,单击“保存”完成创建。 自定义信息 单击“新建自定义信息”,新增一条信息模块。 单击模块名称可以重新定义模块标题,输入相关描述,单击完成保存。单击可以将新建的模块删除。 单击“上传附件”,可以将本地文件上传至自定义模块中。 1.上传单个文件的大小不能超过10M。 2.最多只能上传15个附件。
-
编辑测试计划 在测试计划列表中,单击需要编辑的测试计划名称,页面右侧将滑出编辑窗口,可对测试计划进行编辑。 页签“详情”中,可以编辑测试计划(可以编辑测试计划的名称、编辑描述、选择执行方式、编辑基本信息),编辑完毕单击页面右上方“保存”。 页签“需求”中,可以添加、移除当前测试计划范围的需求,操作方式与新建测试计划里添加、移除需求相关步骤相同。 页签“测试用例”中,可以查看该计划内的测试用例,也可以添加测试计划所属版本的测试用例。 页签“操作历史”中,可以查看测试计划的编辑历史。
-
管理已添加的关键字 对于已添加的关键字,将鼠标悬浮在关键字区域时,可以选择进行以下操作。 单击关键字名称,可以查看关键字的详细信息。 单击“关键字目录”右侧的,可以创建文件夹。可以将步骤3中设置好的关键字储存在自定义的文件夹内。 鼠标悬浮在关键字名称的左侧区域,可以调整关键字的顺序。 单击或鼠标悬浮在关键字拖拽到测试步骤空白页,可以将关键字添加至测试步骤。 单击测试关键字任意区域,可以编辑关键字对应用例详情。 单击,可以查看该关键字的信息。 单击,可禁用关键字,再次单击可解除禁用。 单击,可从操作步骤中删除该关键字。 用户可以修改已保存的关键字协议类型。