CN111767030A - 一种数据采集的方法及装置 - Google Patents

Abstract

本申请公开了一种数据采集的方法及装置，所述方法包括针对每个用户，获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；针对每个用户，生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。采用上述数据采集方法，能够体现执行不同功能的不同步骤之间的关系，所以不受不同场景的限制，减少了开发人员的工作量。同时服务器根据客户端上传的数据不仅能够分析该功能所有用户的数据特点，还能够分析每一个用户的数据特点。

Description

一种数据采集的方法及装置

技术领域

本发明涉及互联网技术领域，尤其是涉及一种数据采集的方法及装置。

背景技术

为了随时随地与用户进行交互，可以通过开发客户端，以便人们可以通过智能手机随时随地获取服务。开发者们常通过优化客户端内的操作流程以便用户使用时更加流畅，提升用户使用客户端时的体验感。

目前，为了优化客户端内的操作流程，通过采集客户端中每个功能中每个步骤对应的用户行为数据，以分析用户对每个功能中每个步骤的体验。例如，通过采集用户对某一功能的每个步骤的用户行为数据发现，用户经常在某一功能的某一步骤上放弃完成该功能，此时可以通过数据分析是否需要优化该步骤甚至是去掉该步骤。

但是，完成一个功能可能需要多个步骤，各个步骤之间具有强相关关系，而在分析用户行为数据时，需要根据各个步骤之间的顺序关系进行分析。在客户端中，有时完成不同功能所需的步骤是不同的，每个客户端中的功能也不尽相同，甚至一个客户端在不同操作系统之间的步骤也是不同的。由此，在采集用户行为数据时，需要针对不同的功能制定不用的数据采集方案，大大增加了开发工作量。

发明内容

针对上述问题，本申请提供一种数据采集的方法及装置，具有通用性，降低了针对不同功能定制不同的数据采集方案的开发工作量。

本申请第一方面提供一种数据采集的方法，应用于对客户端的功能进行数据采集，包括以下步骤：

针对每个用户，获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；

针对每个用户，生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，所述获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径，包括：

通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；其中，所述嵌入式SDK兼容不同的操作系统和/或不同的应用软件。

可选的，所述通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径，之前还包括：

设计所述嵌入式SDK的数据结构；其中，所述数据结构至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键，所述功能主键、所述上一跳主键和所述跳数主键表征所述跳转路径。

可选的，所述生成该功能的所有所述步骤与对应的跳转路径之间的映射关系，包括：

实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合，包括：

将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，所述将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合，之后还包括：

针对目标用户，通过所述映射关系集合分析目标功能的所有所述步骤与对应的跳转路径之间的映射关系。

本申请第二方面提供一种数据采集的装置，应用于对客户端的功能进行数据采集，包括获取单元、生成单元和发送单元：

针对每个用户，所述获取单元，用于获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；

针对每个用户，所述生成单元，用于生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述发送单元，用于将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，所述获取单元具体用于通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；其中，所述嵌入式SDK兼容不同的操作系统和/或不同的应用软件。

可选的，还包括设计单元，用于设计所述嵌入式SDK的数据结构；其中，所述数据结构至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键，所述功能主键、所述上一跳主键和所述跳数主键表征所述跳转路径。

可选的，所述生成单元具体用于实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述发送单元具体用于将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，还包括分析单元，具体用于针对目标用户，通过所述映射关系集合分析目标功能的所有所述步骤与对应的跳转路径之间的映射关系。

相对于现有技术，本申请上述技术方案的优点在于：

本申请提供一种数据采集的方法，应用于对客户端的功能进行数据采集，包括以下步骤：首先，针对每个用户，获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径。然后，针对每个用户，生成该功能的所有所述步骤与对应的跳转路径之间的映射关系。最后，将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

采用上述数据采集方法，在对客户端的功能进行数据采集时，不仅采集客户端执行该功能时的所有步骤，还采集所有步骤之间的跳转路径，能够体现执行不同功能的不同步骤之间的关系，所以不受不同场景的限制，减少了开发人员的工作量。然后生成执行该功能的映射关系，并将该映射关系与对应的用户标识同时上传至服务器，以便服务器不仅能够分析该功能所有用户的数据特点，还能够分析每一个用户的数据特点。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本申请提供的一种数据采集的方法的流程图；

图2为本申请提供的一种采集数据的示意图；

图3为本申请提供的一种映射关系的示意图；

图4为本申请提供的又一种数据采集方法的流程图；

图5为本申请提供的一种数据采集装置的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

目前，各大银行为了方便用户随时随地办理银行的一些业务，均推出了客户端。随着客户端推出的业务功能越来越多，为了给用户提供较好的使用体验，银行会采集用户使用客户端的行为数据，以便分析用户的数据特点，例如，分析客户端内某一业务功能是否被用户所需要。

但是，完成一个功能可能需要多个步骤，各个步骤之间具有强相关关系，而在分析用户行为数据时，需要根据各个步骤之间的顺序关系进行分析。在客户端中，有时完成不同功能所需的步骤是不同的，每个客户端中的功能也不尽相同，甚至一个客户端在不同操作系统之间的步骤也是不同的。由此，在采集用户行为数据时，需要针对不同的功能制定不用的数据采集方案，大大增加了开发工作量。

基于此，本申请提供一种数据采集的方法及装置，用于对不同客户端的不同功能进行数据采集，具有可移植性，降低了开发工作量。

下面结合附图具体进行介绍。

方法实施例一

参见图1，图1为本申请实施例提供的一种数据采集的方法的流程图，该方法可以包括以下步骤101-103。

S101：针对每个用户，获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径。

本申请实施例通过客户端采集用户的行为数据，当用户打开客户端后，客户端基于用户执行的功能，对执行不同功能时的步骤之间的跳转路径进行采集。

例如，用户打开客户端后想要完成查询余额和转账的功能，客户端会将用户执行查询功能执行的所有步骤以及步骤之间的跳转路径进行采集，将用户执行转账功能执行的所有步骤以及步骤之间的跳转路径进行采集。

作为一种可能实现的方式，客户端可以嵌入软件开发工具包SDK，通过嵌入式SDK获取用户执行客户端功能时所有步骤之间的跳转路径。其中，嵌入式SDK能够兼容不同的操作系统和/或不同的应用软件。

嵌入式SDK能够移植到不同的操作系统和/或不同的应用软件，开发人员仅开发嵌入式SDK即可完成数据的采集，无需针对不同的应用场景指定不同的数据采集方案。

作为一种可能实现的方式，在设计嵌入式SDK采集数据的数据结构时，可以将数据结构设计为至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键。

其中，功能主键表征客户端执行功能的名称，上一跳主键表征客户端执行某一功能当前步骤时的上一步骤名称，跳数主键表征客户端从执行某一功能第一步骤到当前步骤之间的步骤数量，源地址键表征客户端在执行某一功能的开始步骤名称，流量统计键表征客户端执行某一功能时从开始步骤至当前步骤的流量，每点击一个步骤，流量加1。

上述三个主键，即功能主键、上一跳主键和跳数主键表征客户端执行某一功能当前步骤来源于上一跳主键记录的步骤，两个步骤之间构成一条跳转路径。

需要说明的是，当客户端执行A功能的跳数为0时，此时的步骤为客户端执行A功能的第一步骤，此时上一跳主键默认为空。

参见图2，该图为本申请提供的一种采集数据的示意图。

源地址表示执行该功能的开始步骤，可以看出流量统计数量与跳数不同，跳数仅是从执行该功能第一步骤到当前步骤之间的步骤数量，而流量统计是从执行该功能第一步骤到当前步骤用户经过所有步骤的数量，包括重复的步骤。

S102：针对每个用户，生成该功能的所有所述步骤与对应的跳转路径之间的映射关系。

客户端采集执行某一功能的跳转路径后，将执行该功能的所有步骤与对应的跳转路径生成映射关系。

本申请实施例不具体限定映射关系的形式，例如映射关系可以为有向拓扑图。

参见图3，该图为本申请实施例提供的一种映射关系的示意图。

A1和A2为执行转账功能的两个不同的开始步骤，I为完成购买基金的结束步骤。以A2为例，完成转账功能的两种路径分别为A2→B→D→G→I或者A2→B→D→H→I，又或者用户没有完成转账功能，在中间步骤就停止，例如A2→B→D。

由于每个场景的功能和执行功能的步骤不相同，所以需要为不同的场景设计不同的数据采集方案。本申请实施例在采集数据的同时采集上一步骤和当前步骤的路径，通过生成执行该功能的所有步骤与对应跳转路径的映射关系，能够体现不同执行功能的不同步骤之间的关系，所以不受不同场景的限制，减少了开发人员的工作量。

S103：将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

客户端将用户执行多个功能的生成的多个映射关系和该使用该客户端的用户标识发送给服务器，以便服务器将多个客户端采集的映射关系生成映射关系集合。

目前，客户端上传采集的数据时，只将数据上传至服务器，以便服务器根据数据进行统计分析。但是，客户端采用该上传方式会导致服务器在进行数据统计分析的时候，无法针对特定用户进行分析。

基于此，作为一种可能的实现方式，服务器根据用户标识和对应的映射关系生成该功能对应的映射关系集合之后，还能够分析特定用户，即目标用户使用客户端的特性。

具体地，针对目标用户，通过目标用户的用户标识，早映射关系集合中找到目标用户的映射关系，从而分析目标用户在使用客户端的每一个功能时的特性。

采用上述数据采集方法，在对客户端的功能进行数据采集时，不仅采集客户端执行该功能时的所有步骤，还采集所有步骤之间的跳转路径，能够体现执行不同功能的不同步骤之间的关系，所以不受不同场景的限制，减少了开发人员的工作量。然后生成执行该功能的映射关系，并将该映射关系与对应的用户标识同时上传至服务器，以便服务器不仅能够分析该功能所有用户的数据特点，还能够分析每一个用户的数据特点。

方法实施例二

为了使本申请实施例提供的技术方案更加清楚，下面结合图4以一个实例对本申请实施例提供的数据采集方法进行说明。

S401：针对每个用户，获取用户对应的客户端执行该功能时所有步骤之间的跳转路径。

该客户端具有嵌入式SDK，用过嵌入式SDK采集该客户端执行A功能时所有步骤之间的跳转路径。

S402：针对每个用户，实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系。

用户通过客户端执行某一功能，每次执行的步骤可能相同，也可能不同。因此，执行该功能的步骤与对应的跳转路径之间的映射关系可能会随着用户的每次使用发生变化。

本申请实施例不具体限定客户端更新映射关系的时间，例如用户每点击一次A功能的执行步骤，都会更新执行A功能的所有步骤与对应的跳转路径之间的映射关系，以保证数据采集的准确性与实时性。

S403：将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

客户端可以实时将映射关系上传至服务器，也可以每隔固定时间将映射关系上传至服务器。本申请实施例不具体限定。

客户端将用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，可以保证客户端的载体的性能，例如手机的性能。客户端实时向服务器发送数据会降低客户端的载体的性能，为了保证客户端载体的性能，可以每个固定时间上传用户的用户标识和对应的映射关系给服务器。

装置实施例

本申请实施例除了提供的数据采集的方法外，还提供了数据采集的装置，应用于对客户端的功能进行数据采集，如图5所示，包括：获取单元501、生成单元502和发送单元503，其中：

针对每个用户，获取单元501，用于获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；

针对每个用户，生成单元502，用于生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

发送单元503，用于将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，所述获取单元具体用于通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；其中，所述嵌入式SDK兼容不同的操作系统和/或不同的应用软件。

可选的，还包括设计单元，用于设计所述嵌入式SDK的数据结构；其中，所述数据结构至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键，所述功能主键、所述上一跳主键和所述跳数主键表征所述跳转路径。

可选的，所述生成单元具体用于实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述发送单元具体用于将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

可选的，还包括分析单元，具体用于针对目标用户，通过所述映射关系集合分析目标功能的所有所述步骤与对应的跳转路径之间的映射关系。

采用上述数据采集装置，在对客户端的功能进行数据采集时，不仅采集客户端执行该功能时的所有步骤，还采集所有步骤之间的跳转路径，能够体现执行不同功能的不同步骤之间的关系，所以不受不同场景的限制，减少了开发人员的工作量。然后生成执行该功能的映射关系，并将该映射关系与对应的用户标识同时上传至服务器，以便服务器不仅能够分析该功能所有用户的数据特点，还能够分析每一个用户的数据特点。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元及模块可以是或者也可以不是物理上分开的。另外，还可以根据实际的需要选择其中的部分或者全部单元和模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种数据采集的方法，其特征在于，应用于对客户端的功能进行数据采集，包括以下步骤：

针对每个用户，获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；

针对每个用户，生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

2.根据权利要求1所述的方法，其特征在于，所述获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径，包括：

通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；其中，所述嵌入式SDK兼容不同的操作系统和/或不同的应用软件。

3.根据权利要求2所述的方法，其特征在于，所述通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径，之前还包括：

设计所述嵌入式SDK的数据结构；其中，所述数据结构至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键，所述功能主键、所述上一跳主键和所述跳数主键表征所述跳转路径。

4.根据权利要求2所述的方法，其特征在于，所述生成该功能的所有所述步骤与对应的跳转路径之间的映射关系，包括：

实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合，包括：

将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

5.根据权利要求1所述的方法，其特征在于，所述将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合，之后还包括：

针对目标用户，通过所述映射关系集合分析目标功能的所有所述步骤与对应的跳转路径之间的映射关系。

6.一种数据采集的装置，其特征在于，应用于对客户端的功能进行数据采集，包括获取单元、生成单元和发送单元：

针对每个用户，所述获取单元，用于获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；

针对每个用户，所述生成单元，用于生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述发送单元，用于将所有用户的用户标识和对应的映射关系发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

7.根据权利要求6所述的装置，其特征在于，所述获取单元具体用于通过嵌入式软件开发工具包SDK获取所述用户对应的客户端执行该功能时所有步骤之间的跳转路径；其中，所述嵌入式SDK兼容不同的操作系统和/或不同的应用软件。

8.根据权利要求7所述的装置，其特征在于，还包括设计单元，用于设计所述嵌入式SDK的数据结构；其中，所述数据结构至少包括：功能主键、上一跳主键、跳数主键、源地址键和流量统计键，所述功能主键、所述上一跳主键和所述跳数主键表征所述跳转路径。

9.根据权利要求7所述的装置，其特征在于，所述生成单元具体用于实时生成该功能的所有所述步骤与对应的跳转路径之间的映射关系；

所述发送单元具体用于将所有用户的用户标识和对应的映射关系以固定时间间隔发送给服务器，以使所述服务器根据所述用户标识和对应的映射关系生成该功能对应的映射关系集合。

10.根据权利要求6所述的装置，其特征在于，还包括分析单元，具体用于针对目标用户，通过所述映射关系集合分析目标功能的所有所述步骤与对应的跳转路径之间的映射关系。

Images