性能测试方法、装置、计算机设备和存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113849402A(43)申请公布日2021.12.28(21)申请号202111115019.7(22)申请日2021.09.23(71)申请人网易（杭州）网络有限公司地址310052浙江省杭州市滨江区长河街道网商路599号4幢7层(72)发明人周平平高峰(74)专利代理机构深圳紫藤知识产权代理有限公司44570代理人管婷(51)Int.Cl.G06F11/36(2006.01)权利要求书4页说明书21页附图3页(54)发明名称性能测试方法、装置、计算机设备和存储介质(57)摘要本申请实施例公开了性能测试方法、装置、计算机设备和存储介质；获取测试任务信息以及当前测试变量；根据测试任务信息以及当前测试变量，生成测试用例集；根据测试用例集对目标设备进行性能测试，确定测试用例集中每个测试用例的性能状态；当测试用例集中的所有测试用例的性能状态均为第二性能状态时，更改当前测试变量的取值范围，得到下一测试变量；当测试用例集中的任意一个测试用例的性能状态为第一性能状态时，根据所有测试用例的性能状态确定目标设备的性能测试结果。在本申请实施例中，在循环测试过程中，通过获取所有测试用例在每轮测试中的性能状态，可以表征整个性能测试结果，提升每轮测试结果的准确性。CN113849402ACN113849402A权利要求书1/4页1.一种性能测试方法，其特征在于，包括：获取测试任务信息以及当前测试变量，所述当前测试变量包括初始测试变量；根据所述测试任务信息以及所述当前测试变量，生成测试用例集，所述测试用例集包括至少一个测试用例；根据所述测试用例集对目标设备进行性能测试，确定所述测试用例集中每个所述测试用例的性能状态，所述性能状态包括第一性能状态和第二性能状态；当所述测试用例集中的所有所述测试用例的性能状态均为所述第二性能状态时，更改所述当前测试变量的取值范围，得到下一测试变量；当所述测试用例集中的任意一个所述测试用例的性能状态为所述第一性能状态时，根据所述测试用例集中的所有所述测试用例的性能状态确定所述目标设备的性能测试结果。2.如权利要求1所述的性能测试方法，其特征在于，所述根据所述测试用例集对目标设备进行性能测试，确定所述测试用例集中每个所述测试用例的性能状态，包括：获取测试策略文件；根据所述测试用例集以及所述测试策略文件对目标设备进行性能测试，确定所述测试用例的测试结果；根据所有所述测试用例的测试结果，确定所述测试用例集中每个所述测试用例的性能状态。3.如权利要求2所述的性能测试方法，其特征在于，所述根据所述测试用例集以及所述测试策略文件对目标设备进行性能测试，确定所述测试用例的测试结果，包括：根据所述测试用例集以及所述测试策略文件，确定所述测试用例的主分片数、客户端并发数以及批量插入数据的测试步长；根据所述测试用例的所述主分片数、所述客户端并发数以及所述批量插入数据的测试步长，确定所述测试用例的测试序列编号；根据所述测试序列编号以及所述测试用例对目标设备进行性能测试，确定所述测试用例的测试结果。4.如权利要求2所述的性能测试方法，其特征在于，所述测试结果包括错误率以及吞吐量分数，所述根据所有所述测试用例的测试结果，确定所述测试用例集中每个所述测试用例的性能状态，包括：当所述测试用例的所述错误率大于预设的阈值时，将所述测试用例的性能状态确定为第二性能状态；当所述测试用例的所述错误率小于等于预设的阈值时，根据所述吞吐量分数确定所述测试用例的性能状态。5.如权利要求4所述的性能测试方法，其特征在于，所述测试结果还包括响应时间分数，所述当所述测试用例的所述错误率小于等于预设的阈值时，根据所述吞吐量分数确定所述测试用例的性能状态，包括：根据所述吞吐量分数确定最大吞吐量分数；当所述测试用例的所述错误率小于等于预设的阈值时，且当所述测试用例的所述吞吐量分数小于所述最大吞吐量分数时，将所述测试用例的性能状态确定为第二性能状态；当所述测试用例的所述错误率小于等于预设的阈值时，且当所述测试用例的所述吞吐2CN113849402A权利要求书2/4页量分数等于所述最大吞吐量分数时，根据所述响应时间分数确定所述测试用例的性能状态。6.如权利要求5所述的性能测试方法，其特征在于，所述当所述测试用例的所述错误率小于等于预设的阈值时，且当所述测试用例的所述吞吐量分数等于所述最大吞吐量分数时，根据所述响应时间分数确定所述测试用例的性能状态，包括：根据所述响应时间分数确定最大响应时间分数；当所述测试用例的所述错误率小于等于预设的阈值时，且当所述测试用例的所述吞吐量分数等于所述最大吞吐量分数，且当所述响应时间分数小于所述最大响应时间分数时，将所述测试用例的性能状态确定为第二性能状态；当所述测试用例的所