眼动数据可视化方法、装置及设备转让专利

申请号 : CN202110650030.7

文献号 : CN113425247B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 侯文军吴思琦陈筱琳

申请人 : 北京邮电大学

摘要 :

本发明实施例提供了一种眼动数据可视化方法、装置及设备,在接收到可视化指令时,获取眼动仪采集的原始眼动数据;当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将所述经幡图作为所述可视化指令对应的视觉特征。本方案可以降低视觉特征复杂度,从而提高视觉特征的分析效率。

权利要求 :

1.一种眼动数据可视化方法,其特征在于,所述方法包括:

在接收到可视化指令时,获取眼动仪采集的原始眼动数据;

当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;

利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图,包括:针对每个注视点,该注视点对应的圆形的半径为该注视点的注视时间与第一系数的乘积,且该注视点存在眼跳时,所述眼跳的初始位置为所述注视点的圆心位置,所述眼跳的方向为所述眼跳的物理方向;其中,所述圆心位置为所述每个注视点的眼跳时间之和与第二系数的乘积;

按照注视时间的先后顺序横向排布所述圆形和所述眼跳,并对每个注视点进行如下绘制,得到所述经幡图:若上一眼跳的视觉方向为水平方向:

从当前注视点向所述上一眼跳所在的水平方向做垂线;所述垂线为实线;

若所述上一眼跳的视觉方向为水平向左,且当前眼跳落在所述垂线的左侧或者与所述垂线重合,确定所述当前眼跳不是回溯性眼跳,并以上一注视点和所述当前注视点为顶点,以所述垂线,以及所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第一三角形;

若所述上一眼跳的视觉方向为水平向左,且当前眼跳落在所述垂线的右侧,确定所述当前眼跳是回溯性眼跳,并以上一注视点和所述当前注视点为顶点,以所述垂线,以及所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第二三角形;

若所述上一眼跳的视觉方向为水平向右,且当前眼跳落在所述垂线的左侧或者与所述垂线重合,确定所述当前眼跳是回溯性眼跳,并绘制所述当前眼跳对应的第二三角形;

若所述上一眼跳的视觉方向为水平向右,且当前眼跳落在所述垂线的右侧,确定所述当前眼跳不是回溯性眼跳,并绘制所述当前眼跳对应的第一三角形;

若上一眼跳的视觉方向不是水平方向:

从所述当前注视点向所述上一眼跳所在直线做垂线,形成交点,并以上一注视点为圆心,以所述上一注视点和所述交点之间的连线为半径画弧线;所述垂线为虚线;

若所述交点落在所述上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入所述弧线的内侧,确定所述当前眼跳是回溯性眼跳,并以上一注视点、所述当前注视点和所述交点为顶点,以所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第二三角形;

若所述交点落在所述上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入所述弧线的外侧,确定所述当前眼跳不是回溯性眼跳,并以上一注视点、所述当前注视点和所述交点为顶点,以所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第一三角形;

若所述交点落在所述上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入所述弧线的内侧,确定所述当前眼跳不是回溯性眼跳,并绘制所述当前眼跳对应的第一三角形;

若所述交点落在所述上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入所述弧线的外侧,确定所述当前眼跳是回溯性眼跳,并绘制所述当前眼跳对应的第二三角形;

其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;

将所述经幡图作为所述可视化指令对应的视觉特征。

2.根据权利要求1所述的方法,其特征在于,在所述按照注视时间的先后顺序横向排布所述圆形和所述眼跳,并对每个注视点进行如下绘制,得到所述经幡图之后,所述方法还包括:获取所述经幡图中三角形的总数,以及第二三角形的数量;

基于所述三角形的总数和所述第二三角形的数量,按照所述第二三角形的占比与所述原始眼动数据对应用户界面的复杂度成正比的规则,获取所述用户界面的复杂度。

3.根据权利要求1所述的方法,其特征在于,当所述可视化指令表明对眼动数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间、视觉方向和眼跳长度;

利用与所述注视时间对应的圆形表征每个注视点,并按照眼跳时间的先后顺序横向排布所述圆形,以及将所述眼跳长度纵向垂直分布在该眼跳长度对应的起始注视点上,得到帆船图;其中,所述帆船图中每个直角三角形的非直角底角反映每个眼跳的速度;

将所述帆船图作为所述可视化指令对应的视觉特征。

4.根据权利要求3所述的方法,其特征在于,所述利用与所述注视时间对应的圆形表征每个注视点,并按照眼跳时间的先后顺序横向排布所述圆形,以及将所述眼跳长度纵向垂直分布在该眼跳长度对应的起始注视点上,得到帆船图,包括:针对每个注视点,该注视点对应的圆形的半径为该注视点的注视时间与第一系数的乘积,且该注视点存在眼跳时,所述眼跳的初始位置为所述注视点的圆心位置,所述眼跳的方向为所述眼跳的物理方向;其中,所述圆心位置为所述每个注视点的眼跳时间之和与第二系数的乘积;

按照眼跳时间的先后顺序横向排布所述圆形和所述眼跳,并对每个注视点进行如下绘制,得到所述帆船图:在所述当前注视点上纵向垂直绘制从当前注视点起始的眼跳的所述眼跳长度的直角边,并以所述当前注视点和下一注视点为端点,以所述直角边,以及所述当前注视点和下一注视点之间的连线为边,绘制直角三角形。

5.根据权利要求4所述的方法,其特征在于,在所述按照眼跳时间的先后顺序横向排布所述圆形和所述眼跳,并对每个注视点进行如下绘制,得到所述帆船图之后,所述方法还包括:获取所述直角三角形直角边的对角的正切值;所述正切值为所述直角三角形对应眼跳的眼动速度;

基于所述正切值,按照眼动速度越大用户的视觉负荷越大的规则,获取所述用户的视觉灵敏度;

获取所述帆船图中直角三角形的总数,以及所述直角三角形的高度;

基于所述直角三角形的总数和所述直角三角形的高度,按照帆船数量与所述原始眼动数据对应用户界面的复杂程度成正比,且帆船高度与用户的视角跨度成正比的规则,获取所述用户对所述用户界面的搜索策略。

6.根据权利要求1所述的方法,其特征在于,当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中的瞳孔直径,以及每个瞳孔直径的时间戳;

基于所述每个瞳孔直径的时间戳,获取直径相同的瞳孔直径的出现频次,并将直径相同的瞳孔直径作为同种类的瞳孔直径以预设宽度为圆环宽度,以每种类型的瞳孔直径为圆环直径,绘制多个透明度不同的同心圆环,得到日晕图;其中,一个圆环表征一种瞳孔直径,且该圆环的透明度表征该种瞳孔直径的出现频次;

将所述日晕图作为所述可视化指令对应的视觉特征。

7.根据权利要求6所述的方法,其特征在于,在所述将所述日晕图作为所述可视化指令对应的视觉特征之后,所述方法还包括:获取所述日晕图中透明度小于透明度阈值的目标圆环在所述日晕图中的分布位置;

基于所述分布位置,按照所述目标圆环越靠近所述日晕图的外边缘,所述原始眼动数据对应的用户界面中干扰元素越少的规则,获取所述用户界面的干扰元素情况。

8.一种眼动数据可视化装置,其特征在于,所述装置包括:

原始数据获取模块,用于在接收到可视化指令时,获取眼动仪采集的原始眼动数据;

特征数据获取模块,用于当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;

特征可视化模块,用于利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将所述经幡图作为所述可视化指令对应的视觉特征;

其中,所述特征可视化模块具体用于:针对每个注视点,该注视点对应的圆形的半径为该注视点的注视时间与第一系数的乘积,且该注视点存在眼跳时,所述眼跳的初始位置为所述注视点的圆心位置,所述眼跳的方向为所述眼跳的物理方向;其中,所述圆心位置为所述每个注视点的眼跳时间之和与第二系数的乘积;

按照注视时间的先后顺序横向排布所述圆形和所述眼跳,并对每个注视点进行如下绘制,得到所述经幡图:若上一眼跳的视觉方向为水平方向:

从当前注视点向所述上一眼跳所在的水平方向做垂线;所述垂线为实线;

若所述上一眼跳的视觉方向为水平向左,且当前眼跳落在所述垂线的左侧或者与所述垂线重合,确定所述当前眼跳不是回溯性眼跳,并以上一注视点和所述当前注视点为顶点,以所述垂线,以及所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第一三角形;

若所述上一眼跳的视觉方向为水平向左,且当前眼跳落在所述垂线的右侧,确定所述当前眼跳是回溯性眼跳,并以上一注视点和所述当前注视点为顶点,以所述垂线,以及所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第二三角形;

若所述上一眼跳的视觉方向为水平向右,且当前眼跳落在所述垂线的左侧或者与所述垂线重合,确定所述当前眼跳是回溯性眼跳,并绘制所述当前眼跳对应的第二三角形;

若所述上一眼跳的视觉方向为水平向右,且当前眼跳落在所述垂线的右侧,确定所述当前眼跳不是回溯性眼跳,并绘制所述当前眼跳对应的第一三角形;

若上一眼跳的视觉方向不是水平方向:

从所述当前注视点向所述上一眼跳所在直线做垂线,形成交点,并以上一注视点为圆心,以所述上一注视点和所述交点之间的连线为半径画弧线;所述垂线为虚线;

若所述交点落在所述上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入所述弧线的内侧,确定所述当前眼跳是回溯性眼跳,并以上一注视点、所述当前注视点和所述交点为顶点,以所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第二三角形;

若所述交点落在所述上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入所述弧线的外侧,确定所述当前眼跳不是回溯性眼跳,并以上一注视点、所述当前注视点和所述交点为顶点,以所述上一注视点和所述当前注视点之间的连线为边,绘制所述当前眼跳对应的第一三角形;

若所述交点落在所述上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入所述弧线的内侧,确定所述当前眼跳不是回溯性眼跳,并绘制所述当前眼跳对应的第一三角形;

若所述交点落在所述上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入所述弧线的外侧,确定所述当前眼跳是回溯性眼跳,并绘制所述当前眼跳对应的第二三角形。

9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

存储器,用于存放计算机程序;

处理器,用于执行存储器上所存放的程序时,实现权利要求1‑7任一所述的方法步骤。

说明书 :

眼动数据可视化方法、装置及设备

技术领域

[0001] 本发明涉及眼动数据分析技术领域,特别是涉及一种眼动数据可视化方法、装置及设备。

背景技术

[0002] 眼动数据分析可以通过眼动仪采集得到数千条甚至上万条的原始眼动数据,进而基于原始眼动数据获取用户的视觉特征,并分析得到用户使用产品的行为逻辑和偏好等用户行为数据。该用户行为数据可以用于对产品的界面设计以及内容分布等方面进行改进。因此,眼动数据分析被广泛应用于需要获取用户行为数据的领域,例如,用户界面分析、以及阅读习惯分析等领域。
[0003] 在具体应用中,基于原始眼动数据获取用户的视觉特征,可以是对原始眼动数据进行可视化处理,将可视化结果作为用户的视觉特征进行人工分析或者机器视觉的分析,得到用户行为数据以及用户观看的产品图像的特点等等数据。可视化处理具体可以是将原始眼动数据绘制为扫描路径。示例性的,如图1所示。在刺激物也就是用户观看的产品图像“深圳到武汉机票的查询结果页面”中,用圆圈代表用户在此位置有一次注视,圆圈的大小代表在此位置上注视时间的长短,圆圈上的数字(图中未示出)代表被测注视的顺序,圆圈之间的连线代表用户在两个注视点之间存在一次眼跳的过程。这样,图1即为扫描路径。其中,眼跳可以理解为用户目光的转移。
[0004] 但是,上述可视化处理得到的扫描路径也就是视觉特征,往往分布杂乱,规律化差,导致所分析的视觉特征复杂度较高,分析效率低。

发明内容

[0005] 本发明实施例的目的在于提供一种眼动数据可视化方法、装置及设备,以实现提高对用户视觉特征的分析效率的效果。具体技术方案如下:
[0006] 第一方面,本发明实施例提供一种眼动数据可视化方法,所述方法包括:
[0007] 在接收到可视化指令时,获取眼动仪采集的原始眼动数据;
[0008] 当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;
[0009] 利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;
[0010] 将所述经幡图作为所述可视化指令对应的视觉特征。
[0011] 第二方面,本发明实施例提供一种眼动数据可视化装置,所述装置包括:
[0012] 原始数据获取模块,用于在接收到可视化指令时,获取眼动仪采集的原始眼动数据;
[0013] 特征数据获取模块,用于当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;
[0014] 特征可视化模块,用于利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将所述经幡图作为所述可视化指令对应的视觉特征。
[0015] 第三方面,本发明实施例提供一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;存储器,用于存放计算机程序;处理器,用于执行存储器上所存放的程序时,实现上述第一方面提供眼动数据可视化方法步骤。
[0016] 本发明实施例有益效果:
[0017] 本发明实施例提供的方案中,利用与注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布圆形,以及基于眼跳时间和视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将经幡图作为可视化指令对应的视觉特征。因此,本方案在脱离刺激物的情况下,以注视时间和眼跳时间结合圆形以及三角形有序展示回溯性眼跳,从而避免基于刺激物的眼跳可视化方式导致的视觉特征复杂问题。可见,本方案可以降低视觉特征复杂度,从而提高视觉特征的分析效率。
[0018] 当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。

附图说明

[0019] 为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
[0020] 图1为对原始眼动数据进行可视化,得到的扫描路径示例图;
[0021] 图2为本发明一实施例提供的一种眼动数据可视化方法的流程示意图;
[0022] 图3(a)为本发明一实施例提供的一种眼动数据可视化方法中,经幡图的示例图;
[0023] 图3(b)为本发明一实施例提供的一种眼动数据可视化方法中,经幡图的绘制示意图;
[0024] 图3(c)为本发明一实施例提供的一种眼动数据可视化方法中,经幡图的应用示例图;
[0025] 图4(a)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的示例图;
[0026] 图4(b)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的绘制示意图;
[0027] 图4(c)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的应用示例图;
[0028] 图4(d)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的应用示例图;
[0029] 图4(e)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的应用示例图;
[0030] 图4(f)为本发明另一实施例提供的一种眼动数据可视化方法中,帆船图的应用示例图;
[0031] 图5(a)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的示例图;
[0032] 图5(b)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的绘制示意图;
[0033] 图5(c)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0034] 图5(d)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0035] 图5(e)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0036] 图5(f)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0037] 图5(g)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0038] 图5(h)为本发明另一实施例提供的一种眼动数据可视化方法中,日晕图的应用示例图;
[0039] 图6为本发明一实施例提供的一种眼动数据可视化装置的结构示意图;
[0040] 图7为本发明一实施例提供的电子设备的结构示意图。

具体实施方式

[0041] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0042] 在具体应用中,本发明实施例提供的一种眼动数据可视化方法可以应用于电子设备。示例性的,该电子设备可以包括:台式计算机,便携式计算机,移动终端,可穿戴设备,互联网电视以及服务器等等设备。
[0043] 如图2所示,本发明实施例提供的一种眼动数据可视化方法,该方法可以包括如下步骤:
[0044] S201,在接收到可视化指令时,获取眼动仪采集的原始眼动数据。
[0045] 在具体应用中,获取眼动仪采集的原始眼动数据的方式可以是多种的。示例性的,可以由用户将眼动仪采集的原始眼动数据输入对眼动数据进行可视化的电子设备;或者,对眼动数据进行可视化的电子设备直接从眼动仪中读取原始眼动数据。另外,所获取的原始眼动数据与可视化指令对应,可视化指令可以表明原始眼动数据的标识、采集时间和采集对象等信息。
[0046] S202,当可视化指令表明对眼跳数据进行可视化时,获取原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向。
[0047] 其中,可视化指令可以表明对哪种眼动数据进行可视化。本发明实施例可以针对不同的眼动数据进行不同的可视化处理,并且,可视化指令可以表明对多种眼动数据进行可视化。这样,可以获得多种可视化处理结果,与仅对一种眼动数据进行可视化相比,可以提高视觉特征的丰富度,从而提高基于视觉特征进行的分析的准确度。
[0048] S203,利用与注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布圆形,以及基于眼跳时间和视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图。
[0049] 其中,回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳。
[0050] 示例性的,如图3(a)所示。经幡图中的圆形表征注视点,按照注视时间的先后顺序横向排布,注视时间的长短决定圆形的大小,因此,圆形与注视时间对应。并且,经幡图中包括两种三角形:第一三角形和第二三角形,第一三角形表征眼跳不是回溯性眼跳,第二三角形表征眼跳是回溯性眼跳。为了便于理解和合理布局,后续以可选实施例的形式对经幡图的获取方式进行具体说明。
[0051] S204,将经幡图作为可视化指令对应的视觉特征。
[0052] 将可视化结果例如经幡图,作为可视化指令对应的视觉特征,后续可以通过人工或者机器视觉对视觉特征进行分析,得到用户行为数据以及用户观看的产品图像的特点等等数据。
[0053] 本发明实施例提供的方案中,利用与注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布圆形,以及基于眼跳时间和视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将经幡图作为可视化指令对应的视觉特征。因此,本方案在脱离刺激物的情况下,以注视时间和眼跳时间结合圆形以及三角形有序展示回溯性眼跳,从而避免基于刺激物的眼跳可视化方式导致的视觉特征复杂问题。可见,本方案可以降低视觉特征复杂度,从而提高视觉特征的分析效率。
[0054] 在一种可选的实施方式中,上述利用与注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布圆形,以及基于眼跳时间,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图,具体可以包括如下步骤:
[0055] 针对每个注视点,该注视点对应的圆形的半径为该注视点的注视时间与第一系数的乘积,且该注视点存在眼跳时,眼跳的初始位置为注视点的圆心位置,眼跳的方向为眼跳的物理方向;其中,圆心位置为每个注视点的眼跳时间之和与第二系数的乘积;
[0056] 按照注视时间的先后顺序横向排布圆形和眼跳,并对每个注视点进行如下绘制,得到经幡图:
[0057] 若上一眼跳的视觉方向为水平方向:
[0058] 从当前注视点向上一眼跳所在的水平方向做垂线;垂线为实线;
[0059] 若上一眼跳的视觉方向为水平向左,且当前眼跳落在垂线的左侧或者与垂线重合,确定当前眼跳不是回溯性眼跳,并以上一注视点和当前注视点为顶点,以垂线,以及上一注视点和当前注视点之间的连线为边,绘制当前眼跳对应的第一三角形;
[0060] 若上一眼跳的视觉方向为水平向左,且当前眼跳落在垂线的右侧,确定当前眼跳是回溯性眼跳,并以上一注视点和当前注视点为顶点,以垂线,以及上一注视点和当前注视点之间的连线为边,绘制当前眼跳对应的第二三角形;
[0061] 若上一眼跳的视觉方向为水平向右,且当前眼跳落在垂线的左侧或者与垂线重合,确定当前眼跳是回溯性眼跳,并绘制当前眼跳对应的第二三角形;
[0062] 若上一眼跳的视觉方向为水平向右,且当前眼跳落在垂线的右侧,确定当前眼跳不是回溯性眼跳,并绘制当前眼跳对应的第一三角形;
[0063] 若上一眼跳的视觉方向不是水平方向:
[0064] 从当前注视点向上一眼跳所在直线做垂线,形成交点,并以上一注视点为圆心,以上一注视点和交点之间的连线为半径画弧线;垂线为虚线;
[0065] 若交点落在上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入弧线的内侧,确定当前眼跳是回溯性眼跳,并以上一注视点、当前注视点和交点为顶点,以上一注视点和当前注视点之间的连线为边,绘制当前眼跳对应的第二三角形;
[0066] 若交点落在上一眼跳的射线延长线上,且沿当前眼跳的射线方向落入弧线的外侧,确定当前眼跳不是回溯性眼跳,并以上一注视点、当前注视点和交点为顶点,以上一注视点和当前注视点之间的连线为边,绘制当前眼跳对应的第一三角形;
[0067] 若交点落在上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入弧线的内侧,确定当前眼跳不是回溯性眼跳,并绘制当前眼跳对应的第一三角形;
[0068] 若交点落在上一眼跳的射线反向延长线上,且沿当前眼跳的射线方向落入弧线的外侧,确定当前眼跳是回溯性眼跳,并绘制当前眼跳对应的第二三角形。
[0069] 示例性的,如图3(b)所示。注视点对应的圆形半径Ri=该注视点的注视时间Tfi×第一系数k;眼跳Si的起始位置Ii=表征注视点的圆形的圆心位置Pi=(眼跳时间Ts1+……+眼跳时间Tsi‑2+眼跳时间Tsi‑1)*第二系数h。其中,眼跳时间Ts1至眼跳时间Tsi‑1为在眼跳Si之前的眼跳的眼跳时间。在具体应用中,上述垂线可以为单位长度。在图3(b)中以眼跳Si+1为当前眼跳,眼跳Si为上一眼跳时:上一眼跳Si为水平向左,作垂线Fi+1Li+1,当前眼跳Si+1的视觉方向Di+1落在垂线Fi+1Li+1左侧,因此,当前眼跳Si+1不是回溯性眼跳,绘制第一三角形△Fi Fi+1Li+1。在图3(b)中以眼跳Si为当前眼跳,眼跳Si‑1为上一眼跳时:当前注视点Fi向上一眼跳Si‑1所在直线Fi‑1Ci,也就是上一眼跳Si‑1的视觉方向Di‑1做垂线FiCi,形成交点为Ci;以Fi‑1为圆心Fi‑1Ci为半径进行绘制弧线Ai。这样,交点Ci落在上一眼跳Si‑1的射线延长线上,且沿当前眼跳Si射线方向落入弧线Ai内侧,当前眼跳Si是回溯性眼跳,绘制第二三角形△Fi‑1FiCi。在图3(b)中以眼跳Si‑1为当前眼跳,眼跳Si‑2(图中未示出)为上一眼跳时:交点Ci‑1落在上一眼跳Si‑1的射线延长线上,且沿当前眼跳Si‑1射线方向落入弧线Ai外侧,因此,当前眼跳Si‑1不是回溯性眼跳,绘制第一三角形△Fi‑2Fi‑1Ci‑1。
[0070] 在一种可选的实施方式中,在上述按照注视时间的先后顺序横向排布圆形和眼跳,并对每个注视点进行如下绘制,得到经幡图之后,本发明实施例提供的眼动数据可视化方法,还可以包括如下步骤:
[0071] 获取经幡图中三角形的总数,以及第二三角形的数量;
[0072] 基于三角形的总数和第二三角形的数量,按照第二三角形的占比与原始眼动数据对应用户界面的复杂度成正比的规则,获取用户界面的复杂度。
[0073] 示例性的,如图3(c)所示。图中左边从上至下排列的4个独立刺激物的界面复杂程度由低到高,且每个独立刺激物右边对应有经幡图。根据经幡图的长度和出现回溯性眼跳的次数,也就是基于三角形的总数和第二三角形的数量计算第二三角形的占比,可确定界面复杂度是依次递增的。并且,在上述4个独立的刺激物中,目标元素的数量级和大小相同的刺激物a和刺激物b中,刺激物b的回溯性眼跳更多,因此,刺激物b也就是用户界面b的干扰物多于用户界面a,用户界面b的复杂度高于用户界面a。类似的,刺激物c和刺激物d的经幡图差异也是由干扰物数量差异造成的。
[0074] 在一种可选的实施方式中,当可视化指令表明对眼动数据进行可视化时,获取原始眼动数据中每个注视点的注视时间、眼跳时间、视觉方向和眼跳长度;
[0075] 利用与注视时间对应的圆形表征每个注视点,并按照眼跳时间的先后顺序横向排布述圆形,以及将眼跳长度纵向垂直分布在该眼跳长度对应的起始注视点上,得到帆船图;其中,帆船图中每个直角三角形的非直角底角反映每个眼跳的速度;
[0076] 将帆船图作为可视化指令对应的视觉特征。
[0077] 示例性的,如图4(a)所示。帆船图中的直角三角形的高即眼跳长度,也就是相对眼跳幅度,非直角底角反映每个眼跳的速度,圆形的大小取决于注视时间的长短。为了便于理解和合理布局,下面以可选实施例的形式对帆船图的绘制进行具体说明。
[0078] 在一种可选的实施方式中,上述利用与注视时间对应的圆形表征每个注视点,并按照眼跳时间的先后顺序横向排布所述圆形,以及将眼跳长度纵向垂直分布在该眼跳长度对应的起始注视点上,得到帆船图,具体可以包括如下步骤:
[0079] 针对每个注视点,该注视点对应的圆形的半径为该注视点的注视时间与第一系数的乘积,且该注视点存在眼跳时,眼跳的初始位置为注视点的圆心位置,眼跳的方向为眼跳的物理方向;其中,圆心位置为每个注视点的眼跳时间之和与第二系数的乘积;
[0080] 按照眼跳时间的先后顺序横向排布圆形和眼跳,并对每个注视点进行如下绘制,得到帆船图:
[0081] 在当前注视点上纵向垂直绘制从当前注视点起始的眼跳的眼跳长度的直角边,并以当前注视点和下一注视点为端点,以直角边,以及当前注视点和下一注视点之间的连线为边,绘制直角三角形。
[0082] 示例性的,如图4(b)所示。注视点半径Ri=注视时间Tfi×第一系数k。眼跳起始位置Ii=注视点的圆心位置Pi=(眼跳时间Ts1+……+眼跳时间Tsi‑2+眼跳时间Tsi‑1)×第二系数h。αi为帆船图中直角三角形的非直角底角。眼跳相对距离Di=眼动移动度数Asi×第三系数d。当前眼跳的眼动速度=眼跳相对距离Di÷当前眼跳的眼跳时间Tsi=tg(αi)。
[0083] 在一种可选的实施方式中,在上述按照眼跳时间的先后顺序横向排布圆形和眼跳,并对每个注视点进行如下绘制,得到帆船图之后,本发明实施例提供的眼动数据可视化方法,还可以包括如下步骤:
[0084] 获取直角三角形直角边的对角的正切值;正切值为直角三角形对应眼跳的眼动速度;
[0085] 基于正切值,按照眼动速度越大用户的视觉负荷越大的规则,获取用户的视觉灵敏度;
[0086] 获取帆船图中直角三角形的总数,以及直角三角形的高度;
[0087] 基于直角三角形的总数和直角三角形的高度,按照帆船数量与原始眼动数据对应用户界面的复杂程度成正比,且帆船高度与用户的视角跨度成正比的规则,获取用户对用户界面的搜索策略。
[0088] 其中,直角三角形直角边的对角的正切值即tg(αi)。示例性的,如图4(c),图4(d),图4(e)以及图4(f)所示。两组刺激物,其中图4(c)的刺激物a和图4(d)的刺激物b为一组,图4(e)的刺激物c和图4(f)的刺激物d为一组,同组刺激物的目标数量级相同。根据刺激物a和刺激物b的帆船图中“帆船数目”远远少于刺激物c和刺激物d的帆船图中“帆船数目”,可以确定刺激物a和刺激物b的目标数量级少于刺激物c和刺激物d,目标数量级越高刺激物也就是用户界面越复杂。其中,“帆船数目”为帆船图中直角三角形的总数。并且,同组内刺激物a的“帆船高度”高于刺激物b的“帆船高度”,刺激物c的“帆船高度”高于刺激物d的“帆船高度”,且刺激物a和刺激物c的正切角度也比刺激物b和刺激物d的正切角度更大,因此,可以确定刺激物b和刺激物d中用户的搜索策略,也就是阅读习惯是谨慎的视觉小步搜索模式,刺激物a和刺激物c中用户的搜索策略是比较大胆的视觉扫略模式。因此,刺激物a的目标元素比刺激物b的目标元素大,刺激物c的目标元素比刺激物d的目标元素大,这与左侧刺激物呈现的结果一样。因此,眼动速度可视化图形“帆船图”在判断用户界面元素数量和界面元素大小上存在有效性。
[0089] 在一种可选的实施方式中,当可视化指令表明对眼跳数据进行可视化时,获取原始眼动数据中的瞳孔直径,以及每个瞳孔直径的时间戳;
[0090] 基于每个瞳孔直径的时间戳,获取直径相同的瞳孔直径的出现频次,并将直径相同的瞳孔直径作为同种类的瞳孔直径;
[0091] 以预设宽度为圆环宽度,以每种类型的瞳孔直径为圆环直径,绘制多个透明度不同的同心圆环,得到日晕图;其中,一个圆环表征一种瞳孔直径,且该圆环的透明度表征该种瞳孔直径的出现频次;
[0092] 将日晕图作为可视化指令对应的视觉特征。
[0093] 在具体应用中,基于每个瞳孔直径的时间戳,获取直径相同的瞳孔直径的出现频次,并将直径相同的瞳孔直径作为同种类的瞳孔直径,具体可以是多种的。示例性的,可以将直径相同的瞳孔直径作为同种类的瞳孔直径,得到多种类型的瞳孔直径,统计每种类型的瞳孔直径中,各时间戳下的瞳孔直径的个数,作为该类型的瞳孔直径的出现频次。或者,示例性的,针对每种直径长度,比较每个时间戳的瞳孔直径是否等于该种直径长度,相等时对该种直径长度的出现频次加1,直到所有时间戳的瞳孔直径与该种直径长度完成比较,得到该种直径长度的瞳孔直径的出现频次。
[0094] 示例性的,如图5(a)所示。基准不透明度X%,选择瞳孔直径的各出现频次中的最大值Fmax,从而每个圆环的不透明度alphak=X%+(1‑X%)*(Fk/Fmax)。每个圆环的宽度Wk=[Lk‑L(k‑1)]/2,Lk代表第k种瞳孔直径的长度,直径从1到k升序排列。因为Lk‑L(k‑1)是一个定值,所以每个圆环的宽度Wk也是定值,这样,呈现日晕图设计如图5(a)所示。对不同直径的瞳孔直径以同心圆环的形式排列后,即可得到如图5(b)所示的完整日晕图。日晕图的构成分成两部分,一是随时间变化的瞳孔波动曲线,二是瞳孔频数分布圆环。圆环最外缘对应的是瞳孔的最大值,圆环最内缘对应的是瞳孔最小值,圆环中的色彩饱和度对应的是相应瞳孔直径出现的频率,颜色最深的部分表示频数最大,瞳孔数据的平均值也非常有可能会分布在颜色最深的部分。日晕图的优势在于将瞳孔的波动情况与瞳孔数据分布情况一起展示,且展示形式非常直观。
[0095] 在一种可选的实施方式中,在上述将日晕图作为可视化指令对应的视觉特征之后,本发明实施例提供的眼动数据可视化方法,还可以包括如下步骤:
[0096] 获取日晕图中透明度小于透明度阈值的目标圆环在日晕图中的分布位置;
[0097] 基于分布位置,按照目标圆环越靠近日晕图的外边缘,原始眼动数据对应的用户界面中干扰元素越少的规则,获取用户界面的干扰元素情况。
[0098] 示例性的,如图5(c)‑图5(h)所示。图5(c)‑图5(h)表明六类刺激物:刺激物a至刺激物f的日晕图的共性是日晕图颜色深的部分越靠近外缘,界面上的元素就越少,且目标元素就越小。在确定了界面目标物数量级和干扰情况后,如果目标物相同且干扰情况也相同,日晕图深颜色越靠近外缘,则界面中的元素越小;当目标物相同且目标大小相同时,日晕图深颜色越靠近内侧,则界面中干扰较多。
[0099] 相应于上述方法实施例,本发明实施例还提供一种眼动数据可视化装置。
[0100] 如图6所示,本发明实施例提供的一种眼动数据可视化装置的结构,该装置可以包括:
[0101] 原始数据获取模块601,用于在接收到可视化指令时,获取眼动仪采集的原始眼动数据;
[0102] 特征数据获取模块602,用于当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;
[0103] 特征可视化模块603,用于利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将所述经幡图作为所述可视化指令对应的视觉特征。
[0104] 本发明实施例提供的方案中,利用与注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布圆形,以及基于眼跳时间和视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;将经幡图作为可视化指令对应的视觉特征。因此,本方案在脱离刺激物的情况下,以注视时间和眼跳时间结合圆形以及三角形有序展示回溯性眼跳,从而避免基于刺激物的眼跳可视化方式导致的视觉特征复杂问题。可见,本方案可以降低视觉特征复杂度,从而提高视觉特征的分析效率。
[0105] 本发明实施例还提供了一种电子设备,如图7所示,包括处理器701、通信接口702、存储器703和通信总线704,其中,处理器701,通信接口702,存储器703通过通信总线704完成相互间的通信,
[0106] 存储器703,用于存放计算机程序;
[0107] 处理器701,用于执行存储器703上所存放的程序时,实现如下步骤:
[0108] 在接收到可视化指令时,获取眼动仪采集的原始眼动数据;
[0109] 当所述可视化指令表明对眼跳数据进行可视化时,获取所述原始眼动数据中每个注视点的注视时间、眼跳时间和视觉方向;
[0110] 利用与所述注视时间对应的圆形表征每个注视点,并按照注视时间的先后顺序横向排布所述圆形,以及基于所述眼跳时间和所述视觉方向,利用两种三角形表征每个眼跳是否为回溯性眼跳,得到经幡图;其中,所述回溯性眼跳为与原视觉方向相比,视觉方向偏移大于90°的眼跳;
[0111] 将所述经幡图作为所述可视化指令对应的视觉特征。
[0112] 上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral Component Interconnect,PCI)总线或扩展工业标准结构(Extended Industry  Standard Architecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
[0113] 通信接口用于上述电子设备与其他设备之间的通信。
[0114] 存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non‑Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
[0115] 上述的处理器可以是通用处理器,包括中央处理器(Central Processor Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field‑Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
[0116] 在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一眼动数据可视化方法的步骤。
[0117] 在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一眼动数据可视化方法。
[0118] 在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
[0119] 需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0120] 本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置和设备实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
[0121] 以上所述仅为本发明的较佳实施例,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。