日志数据的收集方法和装置

摘要

本发明公开了一种日志数据的收集方法和装置。其中，该方法包括：接收终端发送的多媒体开启信息；依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志数据；其中，第一模拟日志数据用于指示多媒体文件开始播放；第二模拟日志数据用于指示多媒体文件正在播放；当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体文件播放结束。本发明解决了由于相关技术中总是实时的将用户的行为数据发送到日志采集服务器造成的带宽压力大，系统资源占用率高的技术问题。

权利要求

1.一种日志数据的收集方法，其特征在于，包括：接收终端发送的多媒体开启信息；

依据所述多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志数据；其中，所述第一模拟日志数据用于指示多媒体文件开始播放；所述第二模拟日志数据用于指示多媒体文件正在播放；

当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，所述第三模拟日志数据，用于指示所述多媒体文件播放结束。

2.根据权利要求1所述的收集方法，其特征在于，所述预设时间范围包括：预先设置的时间区间，或，依据所述多媒体文件的播放时间和时长确定的时间区间。

3.根据权利要求1所述的收集方法，其特征在于，所述方法还包括：在采集时间超出所述预设时间范围的情况下，判断是否接收到所述终端发送的多媒体关闭信息,其中，所述采集时间为采集开始播放的数据信息的时间。

4.根据权利要求1所述的收集方法，其特征在于，所述多媒体文件包括：视频、图片集或音频中的至少一种。

5.一种日志数据的收集装置，其特征在于，包括：接收模块，用于接收终端发送的多媒体开启信息；

第一数据生成模块，用于依据所述多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志数据；其中，所述第一模拟日志数据用于指示多媒体文件开始播放；所述第二模拟日志数据用于指示多媒体文件正在播放；

第二数据生成模块，用于当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，所述第三模拟日志数据，用于指示所述多媒体文件播放结束。

6.根据权利要求5所述的收集装置，其特征在于，所述预设时间范围包括：预先设置的时间区间，或，依据所述多媒体文件的播放时间和时长确定的时间区间。

7.根据权利要求6所述的收集装置，其特征在于，所述装置还包括：判断模块，用于在采集时间超出所述预设时间范围的情况下，判断是否接收到所述终端发送的多媒体关闭信息,其中，所述采集时间为采集开始播放的数据信息的时间。

8.根据权利要求6所述的收集装置，其特征在于，所述多媒体文件包括：视频、图片集或音频中的至少一种。

9.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在设备执行权利要求1至4中任意一项所述的日志数据的收集方法。

10.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序运行时执行权利要求1至4中任意一项所述的日志数据的收集方法。

说明书

日志数据的收集方法和装置

技术领域

[0001] 本发明涉及互联网技术应用领域，具体而言，涉及一种日志数据的收集方法和装置。

背景技术

[0002] 数据采集是现在分析系统中最重要的一个环节，一般采集数据都是通过在部署的网站上，将用户的行为数据发送到日志采集服务器上，然后通过日志采集服务器上的数据
供分析使用，但是对于一些用户长时在一个网站上没有动的情况，需要采集数据变得就比
较麻烦，因为这种情况，一般用户在观看视频或者其他操作，那么该用户在这段时间就不会
在这个网站上做出一些操作，所以该用户应该是持续不断的观看视频，那么该用户的动作
就是持续不断的观看视频。

[0003] 相关技术的实现方案是实时不断的将用户这种行为发送给日志采集服务器，所以每次发送也是相同的数据，都是用户正在观看视频行为的数据。

[0004] 通过该相关技术，网站自动地实时地将用户的行为数据发送到日志采集服务器，会占用用户大量的带宽和日志采集服务器的带宽，不管是对用户、还是对日志采集服务器
都存在不小的带宽压力。

[0005] 针对上述由于相关技术中总是实时的将用户的行为数据发送到日志采集服务器造成的带宽压力大，系统资源占用率高的问题，目前尚未提出有效的解决方案。

发明内容

[0006] 本发明实施例提供了一种日志数据的收集方法和装置，以至少解决由于相关技术中总是实时的将用户的行为数据发送到日志采集服务器造成的带宽压力大，系统资源占用
率高的技术问题。

[0007] 根据本发明实施例的一个方面，提供了一种日志数据的收集方法，包括：接收终端发送的多媒体开启信息；依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为
操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志数据；其中，第一模
拟日志数据用于指示多媒体文件开始播放；第二模拟日志数据用于指示多媒体文件正在播
放；当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志
数据，用于指示多媒体文件播放结束。

[0008] 可选的，预设时间范围包括：预先设置的时间区间，或，依据多媒体文件的播放时间和时长确定的时间区间。

[0009] 可选的，该方法还包括：在采集时间大于预设时间范围的情况下，判断是否接收到终端发送的多媒体关闭信息；在判断结果为未接收到终端发送的多媒体关闭信息的情况
下，生成第四日志数据，其中，第四日志数据，用于指示多媒体文件结束播放。

[0010] 可选的，多媒体文件包括：视频、图片集或音频中的至少一种。

[0011] 根据本发明实施例的另一方面，还提供了一种日志数据的收集装置，包括：接收模块，用于接收终端发送的多媒体开启信息；第一数据生成模块，用于依据多媒体开启信息触
发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围
内生成第二模拟日志数据；其中，第一模拟日志数据用于指示多媒体文件开始播放；第二模
拟日志数据用于指示多媒体文件正在播放；第二数据生成模块，用于当超出预设时间范围
未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体文
件播放结束。

[0012] 可选的，预设时间范围包括：预先设置的时间区间，或，依据多媒体文件的播放时间和时长确定的时间区间。

[0013] 可选的，该装置还包括：判断模块，用于在采集时间大于预设时间范围的情况下，判断是否接收到终端发送的多媒体关闭信息；第三数据生成模块，用于在判断结果为未接
收到终端发送的多媒体关闭信息的情况下，生成第四模拟日志数据，其中，第四模拟日志数
据，用于指示多媒体文件结束播放。

[0014] 可选的，多媒体文件包括：视频、图片集或音频中的至少一种。

[0015] 根据本发明实施例的又一方面，还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行上述日志数据的收集方法。

[0016] 根据本发明实施例的又一方面，还提供了一种处理器，处理器用于运行程序，其中，程序运行时执行上述日志数据的收集方法。

[0017] 在本发明实施例中，通过接收终端发送的多媒体开启信息；依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范
围内生成第二模拟日志数据；其中，第一模拟日志数据用于指示多媒体文件开始播放；第二
模拟日志数据用于指示多媒体文件正在播放；当超出预设时间范围未收到关闭信息时，生
成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体文件播放结束，达到了降
低带宽压力的目的，从而实现了提升系统资源占用率的技术效果，进而解决了由于相关技
术中总是实时的将用户的行为数据发送到日志采集服务器造成的带宽压力大，系统资源占
用率高的技术问题。

附图说明

[0018] 此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

[0019] 图1是根据本发明实施例的日志数据的收集方法的流程示意图；

[0020] 图2是根据本发明实施例的一种日志数据的收集方法的流程示意图；

[0021] 图3是根据本发明实施例的一种日志数据的收集装置的结构示意图。

具体实施方式

[0022] 为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是
本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人
员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范
围。

[0023] 需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用
的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或
描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆
盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于
清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品
或设备固有的其它步骤或单元。

[0024] 实施例一

[0025] 根据本发明实施例，提供了一种日志数据的收集方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽
然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出
或描述的步骤。

[0026] 图1是根据本发明实施例的日志数据的收集方法的流程示意图，如图1所示，在日志服务器侧，该方法包括如下步骤：

[0027] 步骤S102，接收终端发送的多媒体开启信息；

[0028] 其中，本实施例提供的日志数据的收集方法中终端可以为浏览器，或应用程序APP(Application)，在本实施例中以终端为浏览器为例进行说明。

[0029] 步骤S104，依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志数据；其中，第一模拟日志
数据用于指示多媒体文件开始播放；第二模拟日志数据用于指示多媒体文件正在播放；

[0030] 步骤S106，当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体文件播放结束。

[0031] 本申请实施例提供的日志数据的收集方法中，通过接收终端发送的多媒体开启信息；依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日
志数据，并在预设时间范围内生成第二模拟日志数据；其中，第一模拟日志数据用于指示多
媒体文件开始播放；第二模拟日志数据用于指示多媒体文件正在播放；当超出预设时间范
围未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体
文件播放结束，达到了降低带宽压力的目的，从而实现了提升系统资源占用率的技术效果，
进而解决了由于相关技术中总是实时的将用户的行为数据发送到日志采集服务器造成的
带宽压力大，系统资源占用率高的技术问题。

[0032] 可选的，预设时间范围包括：预先设置的时间区间，或，依据多媒体文件的播放时间和时长确定的时间区间。

[0033] 其中，本实施例提供的日志数据的收集方法中预设时间范围可以是预设置的时间范围；或，在多媒体开始播放时，采集开始播放的数据信息，里边携带有视频开始播放时间，
和视频的时长，其中根据视频时长生成预设时间范围，例如获取到视频时长为1h，可以设预
设时间范围为1.5或2h等。

[0034] 可选的，本申请实施例提供的日志数据的收集方法还包括：

[0035] 步骤S111，在采集时间大于预设时间范围的情况下，判断是否接收到终端发送的多媒体关闭信息；

[0036] 步骤S112，在判断结果为未接收到终端发送的多媒体关闭信息的情况下，生成第四模拟日志数据，其中，第四模拟日志数据，用于指示多媒体文件结束播放。

[0037] 可选的，多媒体文件包括：视频、图片集或音频中的至少一种。

[0038] 综上，图2是根据本发明实施例的一种日志数据的收集方法的流程示意图，如图2所示，本申请实施例提供的日志数据的收集方法具体如下：

[0039] 这里减少带宽指的是减少采集数据的带宽，意思就是网站采集数据发送给服务器这部分，这部分也需要占用很高的带宽的。减少带宽不是指用户观看视频的带宽，其实主要
就是以前是直接从用户使用的浏览器将数据发送给数据采集服务器，本申请实施例提供的
日志数据的收集方法通过服务器自身模拟用户数据，用户的浏览器就不会再发送那么多的
数据给服务器了，比原来的方案少很多数据。

[0040] 由于用户在观看视频这段时间内，数据都是同样的行为，所以可以在日志服务器端模拟用户的实时行为(这里的行为主要包括用户是否观看视频，因为浏览器关闭的事件，
网站是捕获不到的，即如果不随时向服务器发送数据的话，不能知道用户是否还在浏览网
站)，即在日志采集服务器中，自动给本身发送数据，发送的是和用户产生相同的数据。

[0041] 并且在一段时间后未收集到用户退出播放的数据，自动发送数据程序停止发送数据，因为现在很难做到在浏览器器关闭的事件，即用户在观看视频是直接关闭了浏览器，这
样网站是不能将关闭浏览器的数据发送到日志采集服务器上的。(这里就是需要在一段时
间后未收到用户退出播放的事件，自动关闭，这种情况基本可以判定用户关闭了浏览器)具
体流程如图2所示。

[0042] 实施例二

[0043] 根据本发明实施例的另一方面，还提供了一种日志数据的收集装置，图3是根据本发明实施例的一种日志数据的收集装置的结构示意图，如图3所示，在日志服务器侧，包括：

[0044] 接收模块32，用于接收终端发送的多媒体开启信息；第一数据生成模块34，用于依据多媒体开启信息触发模拟用户行为操作，根据模拟用户行为操作,生成第一模拟日志数
据，并在预设时间范围内生成第二模拟日志数据；其中，第一模拟日志数据用于指示多媒体
文件开始播放；第二模拟日志数据用于指示多媒体文件正在播放；第二数据生成模块36，用
于当超出预设时间范围未收到关闭信息时，生成第三模拟日志数据，其中，第三模拟日志数
据，用于指示多媒体文件播放结束。

[0045] 本申请实施例提供的日志数据的收集装置中，通过接收模块，用于接收终端发送的多媒体开启信息；第一数据生成模块，用于依据多媒体开启信息触发模拟用户行为操作，
根据模拟用户行为操作,生成第一模拟日志数据，并在预设时间范围内生成第二模拟日志
数据；其中，第一模拟日志数据用于指示多媒体文件开始播放；第二模拟日志数据用于指示
多媒体文件正在播放；第二数据生成模块，用于当超出预设时间范围未收到关闭信息时，生
成第三模拟日志数据，其中，第三模拟日志数据，用于指示多媒体文件播放结束，达到了降
低带宽压力的目的，从而实现了提升系统资源占用率的技术效果，进而解决了由于相关技
术中总是实时的将用户的行为数据发送到日志采集服务器造成的带宽压力大，系统资源占
用率高的技术问题。

[0046] 可选的，预设时间范围包括：预先设置的时间区间，或，依据多媒体文件的播放时间和时长确定的时间区间。

[0047] 可选的，本申请实施例提供的日志数据的收集装置还包括：判断模块，用于在采集时间大于预设时间范围的情况下，判断是否接收到终端发送的多媒体关闭信息；第三数据
生成模块，用于在判断结果为未接收到终端发送的多媒体关闭信息的情况下，生成第四模
拟日志数据，其中，第四模拟日志数据，用于指示多媒体文件结束播放。

[0048] 可选的，多媒体文件包括：视频、图片集或音频中的至少一种。

[0049] 实施例三

[0050] 根据本发明实施例的又一方面，还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行上述实施例一中的日志数据的收集方
法。

[0051] 实施例四

[0052] 根据本发明实施例的又一方面，还提供了一种处理器，处理器用于运行程序，其中，程序运行时执行上述实施例一中的日志数据的收集方法。

[0053] 上述处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来达到了降低带宽压力的目的，从而实现了提升系统资源
占用率的技术效果。

[0054] 存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存
储芯片。

[0055] 本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现所述日志数据的收集方法。

[0056] 本发明实施例提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行所述日志数据的收集方法。

[0057] 本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，本文中的设备可以是服务器、PC、PAD、手机等。

[0058] 本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实
施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机
可用存储介质(包括但不限于磁盘存储器、CD‑ROM、光学存储器等)上实施的计算机程序产
品的形式。

[0059] 本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流
程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序
指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产
生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实
现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

[0060] 这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指
令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或
多个方框中指定的功能。

[0061] 这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或
其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一
个方框或多个方框中指定的功能的步骤。

[0062] 在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

[0063] 存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介
质的示例。

[0064] 计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。
计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动
态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除
可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD‑ROM)、
数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备
或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算
机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

[0065] 还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包
括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要
素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的
过程、方法、商品或者设备中还存在另外的相同要素。

[0066] 本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的
形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存
储介质(包括但不限于磁盘存储器、CD‑ROM、光学存储器等)上实施的计算机程序产品的形
式。

[0067] 以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、
改进等，均应包含在本申请的权利要求范围之内。