一种性能测试方法及装置、存储介质与流程

技术特征：
1.一种性能测试方法，其特征在于，所述方法包括：获取应用程序的第一实验指标和第一参照指标；其中，所述第一实验指标用于反映在第一预设时段内，所述应用程序的预设功能未应用于实验地区的情况下，所述应用程序在所述实验地区的使用情况；所述第一参照指标用于反映在所述第一预设时段内，所述预设功能未应用于多个参照地区的情况下，所述应用程序在所述多个参照地区的使用情况；提取影响所述第一实验指标的多种实验特征、以及影响所述第一参照指标的多种参照特征；根据所述第一实验指标及对应的实验特征、以及所述第一参照指标及对应的参照特征，确定所述多个参照地区对应的组合信息；所述组合信息用于指示所述多个参照地区组成一个合成地区，所述合成地区与所述实验地区的特征相似度高于预定阈值；获取所述应用程序的第二实验指标和第二参照指标；其中，所述第二实验指标用于反映在第二预设时段内，所述预设功能应用于所述实验地区的情况下，所述应用程序在所述实验地区的使用情况；所述第二参照指标用于反映在所述第二预设时段内，所述预设功能未应用于所述多个参照地区的情况下，所述应用程序在所述多个参照地区的使用情况；根据所述第一实验指标、所述第一参照指标、所述第二实验指标、所述第二参照指标、以及所述组合信息，判断所述预设功能应用于所述实验地区所带来的所述应用程序的性能变化；基于判断结果生成所述预设功能的性能测试结果。2.根据权利要求1所述的方法，其特征在于，所述第一实验指标包括：所述第一预设时段内，所述应用程序的预设功能未应用于所述实验地区的情况下，所述应用程序在所述实验地区的预设指标；所述第一参照指标包括：所述第一预设时段内，所述预设功能未应用于所述多个参照地区的情况下，所述应用程序在所述多个参照地区的所述预设指标。3.根据权利要求1或2所述的方法，其特征在于，所述多种实验特征包括：在所述第一预设时段内，影响所述第一实验指标的预设多种特征的数值；所述多种参照特征包括：在所述第一预设时段内，影响所述第一参照指标的所述预设多种特征的数值；其中，所述预设多种特征包括以下至少一种：用户数量，表示用户画像的用户特征，以及能够被量化的地区特征。4.根据权利要求3所述的方法，其特征在于，所述组合信息包括地区组合权重；所述根据所述第一实验指标及对应的实验特征、以及所述第一参照指标及对应的参照特征，确定所述多个参照地区对应的组合信息，包括：根据所述第一实验指标对应的实验特征和所述第一参照指标对应的参照特征，生成特征差异计算公式；其中，所述特征差异计算公式用于在所述预设多种特征的特征权重的不同取值下，根据所述第一实验指标对应的实验特征和所述第一参照指标对应的参照特征计算所述地区组合权重，使所述第一实验指标对应的实验特征和所述第一参照指标对应的参照特征的差异最小；根据所述第一实验指标和所述第一参照指标，生成指标差异计算公式；其中，所述指标差异计算公式用于在所述地区组合权重的不同取值下，计算所述第一实验指标和所述第一
参照指标的差异；所述地区组合权重的不同取值是基于所述预设多种特征的特征权重的不同取值计算得到的；对所述特征差异计算公式和所述指标差异计算公式进行联合求解，得到所述地区组合权重，使所述第一实验指标和所述第一参照指标的差异最小。5.根据权利要求4所述的方法，其特征在于，所述根据所述第一实验指标对应的实验特征和所述第一参照指标对应的参照特征，生成特征差异计算公式，包括：将所述第一实验指标对应的实验特征转化为实验特征矩阵；将所述第一参照指标对应的参照特征转化为参照特征矩阵；将所述实验特征矩阵减去所述参照特征矩阵与地区组合权重矩阵的乘积，得到特征差异矩阵；其中，所述地区组合权重矩阵中包括待求解的所述地区组合权重；将所述特征差异矩阵的转置、特征权重矩阵和所述特征差异矩阵相乘，生成所述特征差异计算公式；其中，所述特征权重矩阵中包括待求解的所述特征权重。6.根据权利要求4所述的方法，其特征在于，所述根据所述第一实验指标和所述第一参照指标，生成指标差异计算公式，包括：将所述第一实验指标转化为第一实验指标矩阵；将所述第一参照指标转换为第一参照指标矩阵；将所述第一实验指标矩阵减去所述第一参照指标矩阵与地区组合权重矩阵的乘积，得到指标差异矩阵；其中，所述地区组合权重矩阵中包括待求解的所述地区组合权重；将所述指标差异矩阵的转置和所述指标差异矩阵相乘，生成所述指标差异计算公式。7.根据权利要求1或2所述的方法，其特征在于，所述根据所述第一实验指标、所述第一参照指标、所述第二实验指标、所述第二参照指标、以及所述组合信息，判断所述预设功能应用于所述实验地区所带来的所述应用程序的性能变化，包括：利用所述组合信息、所述第一参照指标和所述第二参照指标，计算所述合成地区的指标差异值；其中，所述合成地区的指标差异值表征在所述第一预设时段和所述第二预设时段内，所述预设功能未应用于所述实验地区的情况下，所述实验地区的指标的变化值；利用所述第一实验指标和所述第二实验指标，计算所述实验地区的指标差异值；其中，所述实验地区的指标差异值表征在所述第一预设时段内所述预设功能应用于所述实验地区、且在所述第二预设时段内所述预设功能未应用于所述实验地区的情况下，所述实验地区的指标的变化值；计算所述合成地区的指标差异值和所述实验地区的指标差异值的差值，得到所述预设功能应用于所述实验地区所带来的所述实验地区和所述合成地区的指标的差异值，并将所述差异值作为所述判断结果。8.一种性能测试装置，其特征在于，所述装置包括：数据获取模块，用于获取应用程序的第一实验指标和第一参照指标；提取影响所述第一实验指标的多种实验特征、以及影响所述第一参照指标的多种参照特征；其中，所述第一实验指标用于反映在第一预设时段内，所述应用程序的预设功能未应用于实验地区的情况下，所述应用程序在所述实验地区的使用情况；所述第一参照指标用于反映在所述第一预设时段内，所述预设功能未应用于多个参照地区的情况下，所述应用程序在所述多个参照地区的使用情况；
地区组合模块，用于根据所述第一实验指标及对应的实验特征、以及所述第一参照指标及对应的参照特征，确定所述多个参照地区对应的组合信息；所述组合信息用于指示所述多个参照地区组成一个合成地区，所述合成地区与所述实验地区的特征相似度高于预定阈值；所述数据获取模块，还用于获取所述应用程序的第二实验指标和第二参照指标；其中，所述第二实验指标用于反映在第二预设时段内，所述预设功能应用于所述实验地区的情况下，所述应用程序在所述实验地区的使用情况；所述第二参照指标用于反映在所述第二预设时段内，所述预设功能未应用于所述多个参照地区的情况下，所述应用程序在所述多个参照地区的使用情况；性能分析模块，用于根据所述第一实验指标、所述第一参照指标、所述第二实验指标、所述第二参照指标、以及所述组合信息，判断所述预设功能应用于所述实验地区所带来的所述应用程序的性能变化；基于判断结果生成所述预设功能的性能测试结果。9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括计算机指令，当所述计算机指令在性能测试装置上运行时，使得所述性能测试装置执行如权利要求1-7中任一项所述的方法。10.一种计算机程序产品，其特征在于，当所述计算机程序产品在性能测试装置上运行时，使得所述性能测试装置执行如权利要求1-7中任一项所述的方法。

技术总结
本申请实施例提供一种性能测试方法及装置、存储介质，涉及数据分析技术，可以提高预设功能应用于实验地区所带来的应用程序的性能变化的准确度。具体方案包括：获取应用程序的第一实验指标和第一参照指标；提取影响第一实验指标的多种实验特征、以及影响第一参照指标的多种参照特征；根据第一实验指标及对应的实验特征、以及第一参照指标及对应的参照特征，确定多个参照地区对应的组合信息；获取应用程序的第二实验指标和第二参照指标；根据第一实验指标、第一参照指标、第二实验指标、第二参照指标、以及组合信息，判断预设功能应用于实验地区所带来的应用程序的性能变化；基于判断结果生成预设功能的性能测试结果。果生成预设功能的性能测试结果。果生成预设功能的性能测试结果。


技术研发人员：王璐 施发斌
受保护的技术使用者：北京达佳互联信息技术有限公司
技术研发日：2020.08.11
技术公布日：2022/2/23