[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN114625645A - 业务测试方法、装置、电子设备以及可读存储介质 - Google Patents

业务测试方法、装置、电子设备以及可读存储介质 Download PDF

Info

Publication number
CN114625645A
CN114625645A CN202210242959.0A CN202210242959A CN114625645A CN 114625645 A CN114625645 A CN 114625645A CN 202210242959 A CN202210242959 A CN 202210242959A CN 114625645 A CN114625645 A CN 114625645A
Authority
CN
China
Prior art keywords
target service
service
sandbox
return value
test
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210242959.0A
Other languages
English (en)
Inventor
于航
张帆
许恩宁
刘东飞
王颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN202210242959.0A priority Critical patent/CN114625645A/zh
Publication of CN114625645A publication Critical patent/CN114625645A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/50Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
    • G06F21/52Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems during program execution, e.g. stack integrity ; Preventing unwanted data erasure; Buffer overflow
    • G06F21/53Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems during program execution, e.g. stack integrity ; Preventing unwanted data erasure; Buffer overflow by executing in a restricted environment, e.g. sandbox or secure virtual machine

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供了一种业务测试方法、装置、电子设备以及可读存储介质,该方法在业务测试中获取目标服务对应的沙箱配置,并根据沙箱配置向处于运行过程中的目标服务部署沙箱服务,通过沙箱服务录制目标服务在运行过程中的流量记录,再从流量记录中根据请求信息、返回值信息生成流量记录对应的自动化用例,采用该自动化用例即可对目标服务进行业务测试。其中,自动化用例通过录制目标服务在运行过程中产生的流量记录转换得到,降低了自动化用例的转化成本,提高了转化效率,且获取沙箱配置能自动在运行过程中的目标服务部署对应的沙箱服务,并录制目标服务在运行过程中的流量记录、自动转化自动化用例等,有效降低了对底层代码的学习、维护成本。

Description

业务测试方法、装置、电子设备以及可读存储介质
技术领域
本发明涉及计算机技术领域,特别是涉及一种业务测试方法、装置、电子设备以及可读存储介质。
背景技术
接口自动化测试指基于API(Application Programming Interface,应用程序接口)的自动化测试,主要通过自动化用例模拟接口在实现对应功能中的请求、应答过程对接口进行测试,是服务端进行业务测试的主要手段,用于校验数据在系统、组件的接口之间交换、传递和控制管理的过程,以及逻辑依赖关系等,可以包括功能测试、性能测试、稳定性测试、安全性测试等。
目前,常采用Python脚本实现接口自动化测试的架构,需要编写对应的自动化测试用例,使得自动化用例的转化过程需要一定代码基础,效率低,且学习、维护成本高。
发明内容
本发明实施例的目的在于提供一种业务测试方法、装置、电子设备以及可读存储介质,以提高接口自动化测试中的用例转化效率,达到降低学习、维护成本的效果。具体技术方案如下:
在本发明实施的第一方面,首先提供了一种业务测试方法,该方法可以包括:
获取目标服务对应的沙箱配置;
根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
采用所述自动化用例对所述目标服务进行业务测试。
在本发明实施的第二方面,还提供了一种业务测试装置,该装置可以包括:
配置获取模块,用于获取目标服务对应的沙箱配置;
服务部署模块,用于根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
流量录制模块,用于通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
用例生成模块,用于从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
业务测试模块,用于采用所述自动化用例对所述目标服务进行业务测试。
在本发明实施的第三方面,还提供了一种电子设备,该电子设备包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口和所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的所述计算机程序时,实现第一方面所述的业务测试方法。
在本发明实施的第四方面,还一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行上述第一方面所述的业务测试方法。
在本发明实施的第五方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面所述的业务测试方法。
本发明实施例中,在业务测试中,可以获取目标服务对应的沙箱配置,并根据沙箱配置向处于运行过程中的目标服务部署沙箱服务,通过沙箱服务可以录制目标服务在运行过程中的流量记录,再从流量记录中获取对目标服务的请求信息以及目标服务的返回值信息,进而根据请求信息、返回值信息可以生成流量记录对应的自动化用例,采用该自动化用例即可对目标服务进行业务测试。其中,自动化用例通过录制目标服务在运行过程中产生的流量记录转换得到,降低了自动化用例的转化成本,提高了转化效率,且通过获取沙箱配置能够自动在运行过程中的目标服务部署对应的沙箱服务,并录制目标服务在运行过程中的流量记录、自动转化自动化用例等,有效降低了对底层代码的学习、维护成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1是本发明实施例提供的一种业务测试方法的步骤流程图之一;
图2是本发明实施例提供的一种业务测试方法的步骤流程图之二;
图3是本发明实施例提供的一种线上环境部署沙箱服务的对接流程示意图;
图4是本发明实施例提供的一种测试环境中部署沙箱服务的对接流程示意图;
图5是本发明实施例提供的一种流量记录降噪流程示意图;
图6是本发明实施例提供的一种通过持续集成实现业务测试方法的示例图;
图7是本发明实施例提供的一种业务测试系统的架构图;
图8为本发明实施例提供的一种业务测试装置的结构框图;
图9为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
图1是本发明实施例提供的一种业务测试方法的步骤流程图之一,如图1所示,该方法可以包括:
步骤101、获取目标服务对应的沙箱配置。
本发明实施例中,目标服务可以是待测试的业务服务,对目标服务的测试可以是模拟向目标服务发起不同的请求信息,并根据目标服务响应的返回值信息测试目标服务的功能,以确定目标服务的运行情况是否稳定、安全等,从而确定目标服务是否处于正常、错误等状态等。
沙箱配置为沙箱服务的配置信息,沙箱服务用于录制目标服务在运行过程中的流量记录,沙箱服务可以对不同目标服务在实现不同功能的过程中产生的流量记录进行录制,其中,沙箱服务对应的目标服务可以通过沙箱配置确定,如沙箱配置可以包括目标服务的IP(Internet Protocol,互联协议)地址、端口、选择的流量感知插件、采样率等信息,其中,根据IP地址可以确定沙箱服务对应的目标服务,根据端口可以确定沙箱服务需要监控的端口,根据沙箱配置中选择的流量感知插件可以确定录制流量的工具,根据采样率可以确定录制流量记录的频次等,可选地,沙箱配置中的配置信息可以根据需求预先设置、存储,在对目标服务进行业务测试时可以从已存储的沙箱配置中获取目标服务对应的沙箱配置,本发明实施例对此不作具体限制。
步骤102、根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务。
本发明实施例中,目标服务在运行过程中可以接收请求,并响应该请求发送返回值信息以实现对应的功能,根据沙箱配置向运行过程中的目标服务部署沙箱服务可以是在目标服务运行过程中的情况下,根据沙箱配置的配置信息构建沙箱服务,如根据沙箱配置中设置的流量感知插件监控对应的端口,根据沙箱配置中的地址关联目标服务,设置采样率等。
步骤103、通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息。
本发明实施例中,流量记录可以包括目标服务在运行过程中接收的请求信息,以及响应该请求信息发送的返回值信息,可以反映目标服务实现功能的一次完整流程,通过沙箱服务可以录制流量记录,将出入的流量数据复制、存储下来,如可以录制目标服务运行过程中,请求信息、请求信息对应的返回值信息、子调用的请求信息、子调用的请求信息对应的返回值信息,以获得目标服务在运行过程中的流量记录。
还可以对录制的流量记录进行展示,可以是在录制过程中实时展示录制的流量记录,也可以是录制结束后提供对流量记录的查询服务,在接收到对应流量记录的查询请求时对该流量记录进行展示,本发明实施例对此不作具体限制。
步骤104、从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例。
本发明实施例中,可以将录制得到的流量记录转换为自动化用例,以使自动化用例在业务测试中可以向待测的目标服务发送其运行过程中接收到的请求信息,并测试其根据请求信息返回的返回值信息与目标服务在运行过程中返回的返回值信息,其中,自动化用例可以根据测试需求分为核心用例、常规用例、异常用例等等,其中,核心用例可以基于目标服务在线下环境手动测试的运行过程中录制的流量记录转换得到,常规用例可以基于目标服务在线上环境运行过程中录制的流量记录转换得到,异常用例可以基于目标服务在异常环境运行过程中录制的流量记录转换得到。
步骤105、采用所述自动化用例对所述目标服务进行业务测试。
本发明实施例中,可以根据需求在目标服务对自动化用例进行回放,以对目标服务进行业务测试,即通过执行自动化用例可以向待测试的目标服务发送请求信息,并接收目标服务对该请求信息的返回值信息,可以通过比较该返回值信息是否符合自动化用例采用的流量记录中的返回值信息实现对目标服务端的业务测试。
还可以将多个自动化用例在待测试的目标服务上批量回放,再比对自动化用例在目标服务上回放的返回值信息以及流量记录中的返回值信息。
本发明实施例中,在业务测试中,可以获取目标服务对应的沙箱配置,并根据沙箱配置向处于运行过程中的目标服务部署沙箱服务,通过沙箱服务可以录制目标服务在运行过程中的流量记录,再从流量记录中获取对目标服务的请求信息以及目标服务的返回值信息,进而根据请求信息、返回值信息可以生成流量记录对应的自动化用例,采用该自动化用例即可对目标服务进行业务测试。其中,自动化用例通过录制目标服务在运行过程中产生的流量记录转换得到,降低了自动化用例的转化成本,提高了转化效率,且通过获取沙箱配置能够自动在运行过程中的目标服务部署对应的沙箱服务,并录制目标服务在运行过程中的流量记录、自动转化自动化用例等,有效降低了对底层代码的学习、维护成本。
图2是本发明实施例提供的一种业务测试方法的步骤流程图之二,如图2所示,该方法可以包括:
步骤201、接收针对目标服务录入的配置信息,所述配置信息包括目标服务信息、流量端口信息、流量录制工具信息、采样率。
本发明实施例中,可以接收针对目标服务录入的配置信息,配置信息可以包括目标服务信息,如目标服务的名称、标识、地址等,可以包括流量端口信息,如数据出入的端口地址,可以包括流量录制工具信息,如录制工具的名称、种类、版本、调用方式等,可以包括采样率,如每秒复制数据包的个数等。还可以向用户提供录入配置信息的页面,从而通过页面接收针对目标服务录入的配置信息,其中,配置信息可以包括流量录制的方式、业务测试的需求、目标服务的属性等,本发明实施例对此不作具体限制。
步骤202、根据所述配置信息建立所述目标服务对应的沙箱配置,并提供用于获取所述沙箱配置的配置接口。
本发明实施例中,在接收到配置信息后,可以对配置信息进行存储,如可以将配置信息存储在MySQL(关系型数据库)中,并提供可查询、调用该配置信息的调用接口,以实现建立该目标服务对应的沙箱配置。
步骤203、连接所述目标服务。
本发明实施例中,在对目标服务进行业务测试时,可以通过与目标机器建立信任关系实现远程发送、执行命令,从而连接目标服务,其中,目标机器可以是运行目标服务的服务端。
步骤204、通过shell脚本调取所述配置接口,获取所述目标服务对应的所述沙箱配置。
本发明实施例中,可以通过shell(外壳)脚本来进行远程发送、执行命令,其中,shell脚本是由Shell命令组成的执行文件,可以将命令整合到一个文件中进行业务逻辑处理,shell脚本无需编译,通过解释器解释即可运行,在连接目标服务后,可以通过shell脚本执行调取命令,以调用数据库提供的、目标服务对应的配置接口,从而查询、获取目标服务对应的沙箱配置。
步骤205、采用attach方式根据所述沙箱配置向处于运行过程中的所述目标服务部署所述沙箱服务。
本发明实施例中,可以将沙箱配置通过attach的方式部署在目标服务的进程上,进程指处于运行过程中服务的实例,attach是一种进程间通信的方式,通过attach的方式沙箱服务可以录制目标服务运行过程中生成的流量,从而实现沙箱服务的部署。
另外,根据需求本发明实施例可以对线上环境、线下环境中处于运行过程中的目标服务部署沙箱服务,其中,线上环境指用户访问的环境,通常面向用户提供服务,线下环境可以包括开发环境、测试环境等不向用户开放的其他环境。
图3是本发明实施例提供的一种线上环境部署沙箱服务的对接流程示意图,在进行线上部署时,需要预先进行审核、授权等,此时,可以通过录制/回放平台服务对接线上发布平台的审核流程,从而提高沙箱服务在线上部署的效率,具体如图3所示,包括基于业务需求开发录制/回放平台服务(Recorder),以及线上发布平台,其中,线上发布平台面用于面向用户发布不同服务,该对接流程如下所示:
步骤S11、通过Recorder向线上发布平台创建沙箱服务的上线申请;
步骤S12、发布平台根据上线申请创建申请工单;
步骤S13、发布平台通过测试工程师(QA leader,Quality Assurance leader)、研发工程师(RD leader,Research and Development leader)对申请工单进行逐级审核;
步骤S14、在审核通过的情况下,Recorder申请运维root权限;
步骤S15、Recorder基于root权限根据沙箱配置向线上发布平台中处于运行过程中的目标服务部署沙箱服务。
图4是本发明实施例提供的一种测试环境中部署沙箱服务的对接流程示意图,在线下的测试环境中进行沙箱服务的部署时,可以通过录制/回放平台服务对接环境平台,从而在部署测试环境的同时,能够通过调用接口获取沙箱配置,直接部署沙箱服务,有效提高部署流程的效率,具体如图4所示,包括基于业务需求开发录制/回放平台服务(Recorder),以及环境平台,该对接流程如下所示:
步骤S21、环境平台搭建测试环境;
步骤S22、Recorder通过调用接口获取沙箱配置;
步骤S23、Recorder在测试环境中部署沙箱服务。
步骤206、通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息。
本发明实施例中,其中,流量记录可以包括请求信息以及返回值信息等,如请求信息可以包括请求参数、请求头(header)信息、请求体(body)信息等,流量记录还可以包括子调用的请求信息以及返回详细信息,如返回详细信息可以包括数据库、中间件、HTTP(HyperText Transfer Protocol,超文本传输协议)调用、缓存等信息,具体的,步骤206可对应参照前述步骤103的相关描述,为避免重复,在此不再赘述。
步骤207、在降噪环境中所述目标服务上对所述流量记录进行回放,获得所述目标服务返回的降噪返回值信息,所述降噪环境为代码版本与所述目标服务的运行代码版本相同的测试环境。
本发明实施例中,由于目标服务的运行环境复杂多变,干扰因素多,使得录制得到的流量记录可能出现质量差、噪点多的问题,因此,在通过流量记录生成自动化用例前,可以对流量记录中进行降噪处理,以去除干扰,提高流量记录的质量,继而提高自动化用例用于业务测试的效果。其中,降噪环境指代码版本与目标服务的运行代码版本相同的测试环境,运行代码版本指运行过程中目标服务所处运行环境的代码版本,目标服务的运行环境可以是线上环境、线下环境等。在降噪环境中目标服务上对流量记录进行回放,可以是将流量记录中的请求信息向降噪环境中的目标服务转发,并获取降噪环境中目标服务根据请求信息返回的降噪返回值信息。
步骤208、根据所述降噪返回值信息对所述流量记录进行降噪处理。
本发明实施例中,降噪返回值信息中可能包括正常的返回值信息,也可能包括异常的返回值信息,如异常可以是请求超时、请求错误、结果与请求不一致、或在降噪环境中返回的降噪返回值信息与流量记录中请求信息对应的返回值信息不一致等等,此时,可以对降噪返回值信息异常的流量记录进行处理,如可以将流量记录异常的节点作为噪音点存储,并在后续测试执行中不作为判断依据,或者将异常的节点剔除等,本发明实施例对此不作具体限制。
图5是本发明实施例提供的一种流量记录降噪流程示意图,如图5所示,该过程包括:
步骤S31、环境平台搭建降噪环境:
步骤S32、Recorder录制降噪环境中处于运行过程的目标服务的流量记录;
步骤S33、Recorder在降噪环境中回放录制的流量记录;
步骤S34、Recorder获取回放过程中目标服务返回的降噪返回值信息,并对降噪返回值信息与流量记录中的返回值信息进行对比(diff),在不一致时将降噪返回值信息对应的节点确定为异常节点;
步骤S35、Recorder对异常节点进行标记或移除,获得降噪后的流量记录。
步骤209、从经降噪处理后的所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例。
本发明实施例中,步骤209可对应参照前述步骤104的相关描述,为避免重复,在此不再赘述。
如,目标服务可以实现“审核”功能,在运行过程中录制得到流量记录1“请求审核1-通过”与流量记录2“请求审核2-通过”,则根据流量记录1的“请求审核1”、“通过”可以生成自动化用例1,用于测试目标服务审核通过的流程;根据流量记录2的“请求审核2”、“退回”可以生成自动化用例2,用于测试目标服务审核退回的流程。
可选地,所述步骤209之后,还包括:
步骤S41、接收对所述自动化用例的查询请求。
本发明实施例中,在将流量记录转化为自动化用例后,还可以提供自动化用例的查询服务,其中,自动化用例的查询服务可以包括自动化用例的详情数据查询、统计数据查询等等,根据不同的查询请求返回不同的查询结果。可选的,查询请求可以包括查询的数据类型为不同的用例参数、自动化用例统计数量等,还可以包括请求查询的目标服务、查询人等信息,本发明实施例对此不作具体限制。
步骤S42、响应于所述查询请求发送所述自动化用例对应的用例参数,所述用例参数根据与所述自动化用例对应的所述流量记录确定,所述用例参数包括用例类型、用例标识、用例等级、用例数量中的至少一种。
本发明实施例中,用例参数是表征自动化用例的关键信息,可选地,可以从录制的流量记录中提取、生成得到,其中,用例参数可以包括用例类型、用例等级、用例标识、用例详情、用例数量等。进一步的,还可以将流量记录与根据流量记录生成的自动化用例进行关联,以便高效的查询,如在采用流量记录转化生成自动化用例后,通过唯一键(trace_id)将流量记录与生成的自动化用例关联进行管理。
步骤210、执行所述自动化用例,向所述目标服务发送测试请求信息。
本发明实施例中,在需要对目标服务进行业务测试时,可以采用前述基于流量记录生成的自动化用例实现,执行自动化用例可以向目标服务发送测试请求信息,其中,测试请求信息是对自动化用例对应的流量记录中请求信息的复刻,从而能够模拟目标服务在运行过程中实际接收到的请求信息。
如,通过执行自动化用例1向待测试的目标服务发送测试请求信息“请求审核1”,执行自动化用例2向待测试的目标服务发送测试请求信息“请求审核2”。
步骤211、获取所述目标服务响应于所述测试请求信息返回的测试返回值信息。
本发明实施例中,可以接收目标服务响应于测试请求信息返回的测试返回值信息。
如,接收目标服务响应测试请求信息“请求审核1”的测试返回值信息“通过”,接收目标服务响应测试请求信息“请求审核2”的测试返回值信息“退回”。
步骤212、根据所述流量记录对应的所述返回值信息与所述测试返回值信息,确定所述目标服务的业务测试结果。
本发明实施例中,业务测试结果可以比较目标服务在测试的运行过程中与实际的运行过程中返回值信息得到,在流量记录对应的返回值信息与测试返回值信息一致时,可以认为该自动化用例对目标服务的业务测试成功,在流量记录对应的返回值信息与测试返回值信息不一致时,可以认为该自动化用例对目标服务的业务测试失败,可能存在异常。
可选地,所述步骤211之后,还包括:
步骤213、获取所述目标服务在响应所述测试请求信息过程中的代码覆盖率。
本发明实施例中,目标服务在响应请求信息的过程中需要执行对应的代码,从而通过自动化用例实现的业务测试可以覆盖目标服务响应测试请求信息的过程中执行的代码,而不能覆盖目标服务响应测试请求信息的过程中未执行的代码。代码覆盖率为目标服务在响应测试请求信息的过程中执行的代码量在总代码量中所占的比率,不同自动化用例在对目标服务进行业务测试的过程中的代码覆盖率可能不同。
步骤214、根据所述代码覆盖率确定所述自动化用例在业务测试中对所述目标服务的覆盖程度。
本发明实施例中,代码测试率越高表示自动化用例对目标服务的覆盖程度越大,从而通过代码覆盖率可以确定自动化用例对目标服务的测试程度,进而可以评估自动化用例的测试充分性、有效性等,在此基础上,可以通过代码覆盖率对自动化用例进一步筛选、优化,如对覆盖程度低的自动化用例淘汰或调整,对测试的代码重复的自动化用例进行筛选等,从而进一步提到业务测试的效果。
本发明实施例中,还可以将目标服务作为黑盒,将依赖的子调用进行mock,其中,mock指在测试过程中,对于不容易构造、获取的对象,创建虚拟对象模拟以便测试的方法,从而在回放执行自动化用例时,通过回放录制的上下文信息,即能够实现功能回归测试,又能减少业务测试对其他服务的依赖。
本发明实施例中,在业务测试中,可以获取目标服务对应的沙箱配置,并根据沙箱配置向处于运行过程中的目标服务部署沙箱服务,通过沙箱服务可以录制目标服务在运行过程中的流量记录,再从流量记录中获取对目标服务的请求信息以及目标服务的返回值信息,进而根据请求信息、返回值信息可以生成流量记录对应的自动化用例,采用该自动化用例即可对目标服务进行业务测试。其中,自动化用例通过录制目标服务在运行过程中产生的流量记录转换得到,降低了自动化用例的转化成本,提高了转化效率,且通过获取沙箱配置能够自动在运行过程中的目标服务部署对应的沙箱服务,并录制目标服务在运行过程中的流量记录、自动转化自动化用例等,有效降低了对底层代码的学习、维护成本。并且,本发明在录制得到流量记录后,对流量记录在降噪环境中进行了降噪处理,从而消除了干扰,提升了流量记录转化的自动化用例的稳定性和转化效率,并进一步提高了采用自动化用例进行业务测试的效果。
本发明实施例中,可在实际应用中通过持续集成平台实现业务测试,通过持续集成平台进行自动化的环境部署、录制工具部署、自动化用例回放执行、结果收集等,以在自动化CI(Continuous Integration,持续集成)流程中对目标服务进行业务测试。其中,自动化服务可以是异步任务框架和调度系统(vip-job),vip-job可以基于分布式任务调度平台(xxl-job)开发得到,持续集成平台可以是Octopus Deploy(章鱼部署),采用Git(分布式版本控制系统)进行代码管理,在代码变更时通过Git触发自动部署,实现自动化CI。
本发明实施例中,可以基于录制/回放平台服务实现图1、图2任一所示的方案,录制/回放平台服务是可用于录制流量记录,并基于流量记录生成回放的自动化用例的服务,其中,还包括各功能插件的上线、下线、激活、冻结等功能,通过录制/回放平台服务可以对接目标服务的线下环境、线上环境等的流量记录,从而能够通过流量生成可执行的自动化用例,可选地,录制/回放平台服务可以是基于目标服务的业务测试需求开发得到的。
图6是本发明实施例提供的一种通过持续集成实现业务测试方法的示例图,如图6所示,以录制/回放平台服务301(Recorder)为中心,分别对接目标服务302、精准测试服务303、测试环境304、用户服务305、外部平台306,其中,
录制/回放平台服务301用于通过流量感知录制目标服务302的线上环境、线下环境的流量记录等,录制流量记录包括录制线上请求信息、录制子调用请求信息、录制返回值信息;
录制/回放平台服务301还用于根据流量记录生成自动化用例;
录制/回放平台服务301还用于控制各种功能插件的上线、下线,或者激活、冻结等。
目标服务302为待测试的业务服务,目标服务302在线上环境面向用户运行的过程中可以产生线上用户流量,目标服务302在线下的测试环境进行手工测试时可以产生线下手工测试流量;
精准测试服务303用于接收录制/回放平台服务301上报录制的请求,以收集录制/回放平台服务301回放的自动化用例的代码覆盖率,并根据代码覆盖率对自动化用例进行筛选、优化,如精准测试服务303可以删除代码覆盖率低的自动化用例;
测试环境304用于模拟目标服务运行的线上环境,使得录制/回放平台服务301在测试环境304中对目标服务302回放执行自动化用例,并获取回放结果进行业务测试;
用户服务305用于从录制/回放平台服务301读取自动化用例的信息,以向用户提供流量记录、自动化用例、业务测试结果等所有信息的展示服务,执行自动化用例的结果信息的展示服务,业务测试报告的展示服务等展示服务;
用户服务305还用于提供触发自动化用例回放、执行等功能的选项,从而使得测试人员能够通过录制/回放平台服务301对目标服务302进行手动的业务测试;
外部平台306可以包括发布平台(Release Manage)3061、环境平台3062、动态流工作平台3063等,其中,发布平台3061用于基于录制/回放平台服务301的创建申请启动线上环境中部署沙箱服务的流程,其中,线上环境中部署沙箱服务的流程包括线上部署申请、逐级审核、授权部署等;
环境平台3062用于实现测试环境部署、测试环境管理,并基于录制/回放平台服务301提供的更新信息对测试环境进行更新;
动态流工作平台3063用于通过octopus插件对接自动化持续集成平台与录制/回放平台服务301,实现CI流程的自动化业务测试。
图7是本发明实施例提供的一种业务测试系统的架构图,如图7所示,该系统包括基础层、服务层、代理层、业务层、平台层,其中,
在基础层完成了对开源工具(sandbox-repeater插件)针对业务测试的二次开发,能够实现流量录制/回放的基础功能,具体包括子调用信息录制、回放,子调用mock,JVM(Java Virtual Machine,Java虚拟机)异常模拟等,同时通过插件扩展简化了工具的部署流程,其中,扩展的插件包括Rest Template(HTTP请求工具)、Mybatis(持久层框架)、Redis(Remote Dictionary Server,远程字典服务)、Hibemate(开放源代码的对象关系映射框架)、Encache(进程内缓存框架)、JPA(Java Persistence API,Java持久层API)等;
在服务层(sandbox-console)封装了对工具使用状态的操作方法,包括服务申请、配置管理、模块挂载、模块激活、模块冻结、心跳监听等,同时,还支持入口/子调用数据查询、数据分析、mock数据处理、录制、回放、mock数据的存储与展示等;
在代理层与业务层主要为页面提供了后端接口服务的支撑,满足了流量接入、配置化、用例回放执行等操作,具体包括代理层的代理沙箱的挂载、激活、冻结等接口,以及业务层中用于用例回放执行的python case(用例)接入、手工case接入、线上流量接入、异常case接入等接口;
在平台层向用户提供可交互操作的页面,以实现配置管理、用例管理、流量信息查询、mock信息查询、回放任务启动等功能,让用户能够以低成本、高效率的进行接入。
本发明实施例中,在系统层面,通过平台层向用户提供可交互从操作的页面,无需用户对底层工具进行开发、理解,能够有效提高工具的使用效率,同时,通过跨平台对接,以录制/回放平台服务为中心打通了发布平台、环境平台、动态流工作平台、覆盖率的精准测试服务平台等多个功能平台,进一步提升了业务测试的实现中的标准化、自动化,提升了业务测试的效率和效果。
图8是本发明实施例提供的一种业务测试装置40的结构框图,如图8所示,该装置可以包括:
配置获取模块401,用于获取目标服务对应的沙箱配置;
服务部署模块402,用于根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
流量录制模块403,用于通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
用例生成模块404,用于从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
业务测试模块405,用于采用所述自动化用例对所述目标服务进行业务测试。
可选地,所述装置还包括:
流量回放模块,用于在降噪环境中所述目标服务上对所述流量记录进行回放,获得所述目标服务返回的降噪返回值信息,所述降噪环境为代码版本与所述目标服务的运行代码版本相同的测试环境。
流量降噪模块,用于根据所述降噪返回值信息对所述流量记录进行降噪处理。
所述用例生成模块404,具体用于从经过降噪处理的所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例。
可选地,所述装置还包括:
查询请求接收模块,用于接收对所述自动化用例的查询请求;
查询请求响应模块,用于响应于所述查询请求发送所述自动化用例对应的用例参数,所述用例参数根据与所述自动化用例对应的所述流量记录确定,所述用例参数包括用例类型、用例标识、用例等级、用例数量中的至少一种。
可选地,所述业务测试模块405,包括:
用例执行子模块,用于执行所述自动化用例,向所述目标服务发送测试请求信息;
响应获取子模块,用于获取所述目标服务响应于所述测试请求信息返回的测试返回值信息;
业务测试子模块,用于根据所述流量记录对应的所述返回值信息与所述测试返回值信息,确定所述目标服务的业务测试结果。
可选地,所述装置还包括:
代码覆盖率获取模块,用于获取所述目标服务在响应所述测试请求信息过程中的代码覆盖率;
测试覆盖度获取模块,用于根据所述代码覆盖率确定所述自动化用例在业务测试中对所述目标服务的覆盖程度。
可选地,所述装置还包括:
配置信息接收模块,用于接收针对目标服务录入的配置信息,所述配置信息包括目标服务信息、流量端口信息、流量录制工具信息、采样率;
沙箱配置建立模块,用于根据所述配置信息建立所述目标服务对应的沙箱配置,并提供用于获取所述沙箱配置的配置接口。
可选地,所述配置获取模块,包括:
目标服务连接子模块,用于连接所述目标服务;
沙箱配置获取子模块,用于通过shell脚本调取所述配置接口,获取所述目标服务对应的所述沙箱配置。
可选地,所述服务部署模块402,具体用于采用attach方式根据所述沙箱配置向处于运行过程中的所述目标服务部署所述沙箱服务。
本发明实施例中,在业务测试中,可以获取目标服务对应的沙箱配置,并根据沙箱配置向处于运行过程中的目标服务部署沙箱服务,通过沙箱服务可以录制目标服务在运行过程中的流量记录,再从流量记录中获取对目标服务的请求信息以及目标服务的返回值信息,进而根据请求信息、返回值信息可以生成流量记录对应的自动化用例,采用该自动化用例即可对目标服务进行业务测试。其中,自动化用例通过录制目标服务在运行过程中产生的流量记录转换得到,降低了自动化用例的转化成本,提高了转化效率,且通过获取沙箱配置能够自动在运行过程中的目标服务部署对应的沙箱服务,并录制目标服务在运行过程中的流量记录、自动转化自动化用例等,有效降低了对底层代码的学习、维护成本。并且,本发明在录制得到流量记录后,对其中的线上用户流量在降噪环境中进行了降噪处理,从而消除了干扰,提升了流量记录转化的自动化用例的稳定性和转化效率,并进一步提高了采用自动化用例进行业务测试的效果。
图9是本发明实施例提供的一种电子设备的结构示意图,如图9所示,包括处理器501、通信接口502、存储器503和通信总线504,其中,处理器501,通信接口502,存储器503通过通信总线504完成相互间的通信,
存储器503,用于存放计算机程序;
处理器501,用于执行存储器503上所存放的程序时,实现如下步骤:
获取目标服务对应的沙箱配置;
根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
采用所述自动化用例对所述目标服务进行业务测试。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的业务测试方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的业务测试方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种业务测试方法,其特征在于,所述方法包括:
获取目标服务对应的沙箱配置;
根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
采用所述自动化用例对所述目标服务进行业务测试。
2.根据权利要求1所述的方法,其特征在于,所述从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例之前,还包括:
在降噪环境中所述目标服务上对所述流量记录进行回放,获得所述目标服务返回的降噪返回值信息,所述降噪环境为代码版本与所述目标服务的运行代码版本相同的测试环境;
根据所述降噪返回值信息对所述流量记录进行降噪处理;
所述从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例,包括:
从经降噪处理后的所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例。
3.根据权利要求1所述的方法,其特征在于,所述从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例之后,还包括:
接收对所述自动化用例的查询请求;
响应于所述查询请求发送所述自动化用例对应的用例参数,所述用例参数根据与所述自动化用例对应的所述流量记录确定,所述用例参数包括用例类型、用例标识、用例等级、用例数量中的至少一种。
4.根据权利要求1所述的方法,其特征在于,所述采用所述自动化用例对所述目标服务进行业务测试,包括:
执行所述自动化用例,向所述目标服务发送测试请求信息;
获取所述目标服务响应于所述测试请求信息返回的测试返回值信息;
根据所述流量记录对应的所述返回值信息与所述测试返回值信息,确定所述目标服务的业务测试结果。
5.根据权利要求4所述的方法,其特征在于,所述获取所述目标服务响应于所述测试请求信息返回的测试返回值信息之后,还包括:
获取所述目标服务在响应所述测试请求信息过程中的代码覆盖率;
根据所述代码覆盖率确定所述自动化用例在业务测试中对所述目标服务的覆盖程度。
6.根据权利要求1所述的方法,其特征在于,所述获取目标服务对应的沙箱配置之前,包括:
接收针对目标服务录入的配置信息,所述配置信息包括目标服务信息、流量端口信息、流量录制工具信息、采样率;
根据所述配置信息建立所述目标服务对应的沙箱配置,并提供用于获取所述沙箱配置的配置接口;
所述获取目标服务对应的沙箱配置,包括:
连接所述目标服务;
通过shell脚本调取所述配置接口,获取所述目标服务对应的所述沙箱配置。
7.根据权利要求1所述的方法,其特征在于,所述根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务,包括:
采用attach方式根据所述沙箱配置向处于运行过程中的所述目标服务部署所述沙箱服务。
8.一种业务测试装置,其特征在于,所述装置包括:
配置获取模块,用于获取目标服务对应的沙箱配置;
服务部署模块,用于根据所述沙箱配置向处于运行过程中的所述目标服务部署沙箱服务;
流量录制模块,用于通过所述沙箱服务录制所述目标服务在运行过程中的流量记录,所述流量记录包括对所述目标服务的请求信息、所述目标服务的返回值信息;
用例生成模块,用于从所述流量记录中获取对所述目标服务的请求信息、所述目标服务的返回值信息,并根据所述请求信息、所述返回值信息生成所述流量记录对应的所述自动化用例;
业务测试模块,用于采用所述自动化用例对所述目标服务进行业务测试。
9.一种电子设备,其特征在于,所述电子设备包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口和所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的所述计算机程序时,实现权利要求1~7任一所述的业务测试方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1~7中任一所述的业务测试方法。
CN202210242959.0A 2022-03-11 2022-03-11 业务测试方法、装置、电子设备以及可读存储介质 Pending CN114625645A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210242959.0A CN114625645A (zh) 2022-03-11 2022-03-11 业务测试方法、装置、电子设备以及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210242959.0A CN114625645A (zh) 2022-03-11 2022-03-11 业务测试方法、装置、电子设备以及可读存储介质

Publications (1)

Publication Number Publication Date
CN114625645A true CN114625645A (zh) 2022-06-14

Family

ID=81901582

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210242959.0A Pending CN114625645A (zh) 2022-03-11 2022-03-11 业务测试方法、装置、电子设备以及可读存储介质

Country Status (1)

Country Link
CN (1) CN114625645A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115203063A (zh) * 2022-09-16 2022-10-18 平安银行股份有限公司 基于实时录制的生产流量重跑风险程序的回放方法及系统
CN115834443A (zh) * 2022-09-07 2023-03-21 深圳依时货拉拉科技有限公司 流量回放方法、装置、计算机设备和存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115834443A (zh) * 2022-09-07 2023-03-21 深圳依时货拉拉科技有限公司 流量回放方法、装置、计算机设备和存储介质
CN115203063A (zh) * 2022-09-16 2022-10-18 平安银行股份有限公司 基于实时录制的生产流量重跑风险程序的回放方法及系统

Similar Documents

Publication Publication Date Title
CN111522922B (zh) 日志信息查询方法、装置、存储介质及计算机设备
CN107122258B (zh) 用于测试接口的状态码校验的方法及设备
US8141043B2 (en) Automated business process testing that spans multiple platforms or applications
CN111897724B (zh) 一种适用于云平台的自动化测试方法及装置
US20100023929A1 (en) Extensible execution language
CN112131829A (zh) 一种芯片寄存器的验证方法、系统及相关装置
CN112052172B (zh) 第三方通道的快速测试方法、装置和电子设备
CN111522728A (zh) 自动化测试用例的生成方法、电子设备及可读存储介质
CN114625645A (zh) 业务测试方法、装置、电子设备以及可读存储介质
CN112199277B (zh) 一种基于浏览器的缺陷复现方法、装置、设备及存储介质
CN112650688A (zh) 自动化回归测试方法、关联设备以及计算机程序产品
CN115080398A (zh) 一种接口自动化测试系统及方法
CN112260885A (zh) 一种工控协议自动测试方法、系统、装置及可读存储介质
CN111708712A (zh) 用户行为测试用例的生成方法、流量回放方法及电子设备
KR20070104202A (ko) 휴대폰 소프트웨어 검증을 위한 자동화 테스트 서비스시스템 및 그 방법
CN111857103B (zh) 一种车辆诊断方法、装置、设备及存储介质
CN111078527B (zh) 用于对服务器进行压力测试的辅助系统以及方法
CN114077540A (zh) 一种接口测试系统及接口测试方法
CN115396501B (zh) 一种信息处理方法、装置、电子设备及可读存储介质
CN116719735A (zh) 一种测试用例生成方法及装置
CN115705284A (zh) 一种自动化测试系统、方法、设备及介质
CN111651356A (zh) 一种应用程序测试方法、装置及系统
CN115373973A (zh) 一种软件系统测试方法及装置
CN115373970A (zh) 一种软件系统测试方法及装置
US20220197945A1 (en) Computer-implemented method for analyzing a transaction log

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination