眼动跟踪方法及装置与流程

未命名 08-14 阅读:177 评论:0


1.本技术涉及眼动跟踪技术领域,特别涉及为一种眼动跟踪方法及装置。


背景技术:

2.眼动跟踪是一个识别某人在看什么、怎么看的过程,已广泛应用于人机交互、虚拟现实、车辆辅助驾驶、人因分析和心理研究等多个领域。从眼球的生理结构来说,人类主要通过中央凹区域来获取视觉数据,中央凹只能提供约1-2度的视角。虽然该区域仅占视野范围的极小部分,但通过此区域记录的信息却包含了通过视觉神经传递到大脑的有效视觉信息的50%。因此,人类的视觉和注意系统围绕着一个主要目标工作:使感兴趣的目标的光学成像聚焦于中央凹处。这是眼动行为最根本、最主要的原因。
3.按照使用场景来分类,眼动跟踪设备主要可以分为两种:屏幕式眼动仪和穿戴式眼动仪。屏幕式眼动仪放置在离用户一定距离的地方来跟踪用户的眼球运动。穿戴式眼动仪通过将眼动跟踪系统和场景摄像机集成在轻量化的框架上,例如眼镜或头盔上,来采集用户在真实环境中的眼动行为,这种情况下的视线方向检测精度较高,用户可以自由移动,使实验的生态效度最大化。
4.在现有技术中,穿戴式眼动仪包括显示模块即镜片和摄像头模块,通常摄像头模块设置在显示模块下方,且摄像头模块与眼球的连线,和眼球与镜片所在平面的垂线之间有一个夹角,便于一次采集更多的眼球图像数据,但不同的用户的下眼睫毛的长度不一致,有些用户的下眼睫毛较长,摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果。


技术实现要素:

5.为了解决现有穿戴式眼动仪的摄像头模块设置在显示模块下方,且向上有一个倾角,因此摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果的问题,本发明提供了一种眼动跟踪方法及装置。
6.为了实现上述发明目的,本发明提供如下技术方案:
7.第一方面,提供了一种眼动跟踪方法,应用于穿戴式眼动仪,所述方法包括:
8.向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线;
9.向图像采集装置发送第二控制指令,所述第二控制指令用于控制图像采集装置采集侧面眼球图像,所述图像采集装置设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像;
10.接收所述图像采集装置采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。
11.在第一方面的一个具体实施方式中,所述接收所述图像采集装置采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置,包括:接收所述图像
采集装置采集的侧面眼球图像,检测发光装置发射的红外光经过眼球反射后在侧面眼球图像上形成的光斑,得到光斑信息;检测在侧面眼球图像中的人眼瞳孔的轮廓或中心点,得到瞳孔信息;基于光斑信息和瞳孔信息,计算眼球运动轨迹参数;获取显示装置的位置信息,基于眼球运动轨迹参数和显示装置位置信息,得到眼球聚焦在显示装置上的眼睛注视位置。
12.在第一方面的一个具体实施方式中,在所述接收所述图像采集装置采集的侧面眼球图像之后,还包括:向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。
13.在第一方面的一个具体实施方式中,所述图像采集装置设置在所述穿戴式眼动仪的镜腿朝向眼球的侧面上,且所述图像采集装置的位置与用户两个瞳孔中心点之间的连线处于同一个平面。
14.在第一方面的一个具体实施方式中,所述图像采集装置设置在所述穿戴式眼动仪的鼻托朝向眼球的侧面上,且所述图像采集装置的位置在用户两个瞳孔中心点之间的连线上。
15.在第一方面的一个具体实施方式中,所述发光装置为红外泛光发射装置,所述图像采集装置为红外摄像头。
16.第二方面,提供了一种眼动跟踪装置,应用于穿戴式眼动仪,所述装置还包括:
17.第一发送模块,用于向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线;
18.第二发送模块,用于向图像采集装置发送第二控制指令,所述第二控制指令用于控制图像采集装置采集侧面眼球图像,所述图像采集装置设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像;
19.计算模块,用于接收所述图像采集装置采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。
20.在第二方面的一个具体实施方式中,计算模块还用于接收所述图像采集装置采集的侧面眼球图像,检测发光装置发射的红外光经过眼球反射后在侧面眼球图像上形成的光斑,得到光斑信息;检测在侧面眼球图像中的人眼瞳孔的轮廓或中心点,得到瞳孔信息;基于光斑信息和瞳孔信息,计算眼球运动轨迹参数;获取显示装置的位置信息,基于眼球运动轨迹参数和显示装置位置信息,得到眼球聚焦在显示装置上的眼睛注视位置。
21.在第二方面的一个具体实施方式中,所述装置还包括:第三发送模块,用于向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。
22.在第二方面的一个具体实施方式中,所述图像采集装置设置在所述穿戴式眼动仪的镜腿朝向眼球的侧面上,且所述图像采集装置的位置与用户两个瞳孔中心点之间的连线处于同一个平面。
23.在第二方面的一个具体实施方式中,所述图像采集装置设置在所述穿戴式眼动仪的鼻托朝向眼球的侧面上,且所述图像采集装置的位置在用户两个瞳孔中心点之间的连线上。
24.在第二方面的一个具体实施方式中,所述发光装置为红外泛光发射装置,所述图
像采集装置为红外摄像头。
25.上述眼动跟踪方法及装置,通过向发光装置发送第一控制指令来控制发光装置发射光线,并向图像采集装置发送第二控制指令来控制图像采集装置采集侧面眼球图像,再接收图像采集装置采集的侧面眼球图像,根据侧面眼球图像进行眼动跟踪计算,最终得到眼睛注视位置。在穿戴式眼动仪的侧面设置图像采集装置,使得图像采集装置采集的图像是眼球侧面的图像,侧面可以是眼球外侧或内侧,由于眼球侧面没有眼睫毛,因此采集的眼球侧面图像就不会被眼睫毛遮挡,不会缺少关键数据,因此计算眼睛注视位置时会更为精确。
附图说明
26.为了更清楚地说明本技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
27.其中:
28.图1为一个实施例中眼动跟踪方法的流程示意图;
29.图2为一个实施例中图像采集装置设置位置示意图;
30.图3为一个实施例中眼动跟踪装置的系统示意图;
31.图4为一个实施例中计算机设备的内部结构图。
32.其中:
33.1、图像采集装置;2、镜腿;3、鼻托。
具体实施方式
34.此处所描述的具体实施例仅仅用以解释本技术,并不用于限定本技术。
35.下面将结合本技术的实施例中的附图,对本技术的实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本技术的一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本技术保护的范围。
36.需要说明的是,本技术的说明书和权利要求书及上述附图中的术语“包括”、“包含”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、终端、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本技术的权利要求书、说明书以及说明书附图中的术语,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来,而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实时的关系或者顺序。
37.在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本技术的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其他实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其他实施例相结合。
38.按照使用场景来分类,眼动跟踪设备主要可以分为两种:屏幕式眼动仪和穿戴式眼动仪。屏幕式眼动仪放置在离用户一定距离的地方来跟踪用户的眼球运动。穿戴式眼动仪通过将眼动跟踪系统和场景摄像机集成在轻量化的框架上,例如眼镜或头盔上,来采集用户在真实环境中的眼动行为,这种情况下的视线方向检测精度较高,用户可以自由移动,使实验的生态效度最大化。
39.在现有技术中,穿戴式眼动仪包括显示模块(相当于镜片)和摄像头模块,通常摄像头模块设置在显示模块(镜片)下方,且摄像头模块与眼球的连线,和眼球与镜片所在平面的垂线之间有一个夹角,便于一次采集更多的眼球图像数据,但不同的用户的下眼睫毛的长度不一致,有些用户的下眼睫毛较长,摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果。
40.为了解决这一技术问题,如图1所示,第一方面,提出了一种眼动跟踪方法,应用于穿戴式眼动仪,所述方法包括:
41.步骤101:处理器向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线。
42.值得注意的是,在戴上穿戴式眼动仪后,眼球处于比较黑暗的环境,难以采集到清晰明亮的眼球图像。在本实施例中,发光装置为红外泛光发射装置,能发射红外线,用于照亮人眼。且红外泛光发射装置设置的位置与用户眼球之间没有阻挡。当用户戴上穿戴式眼动仪后,处理器首先向发光装置发送第一控制指令,来控制发光装置发射红外线,照亮用户的眼球。
43.步骤102:处理器向图像采集装置1发送第二控制指令,所述第二控制指令用于控制图像采集装置1采集侧面眼球图像,所述图像采集装置1设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像。
44.值得注意的是,在现有的穿戴式眼动仪中,图像采集装置1都是设置在显示装置(镜片)的下方,且摄像头模块与眼球的连线,和眼球与镜片所在平面的垂线之间有一个夹角,便于一次采集更多的眼球图像数据,但不同的用户的下眼睫毛的长度不一致,有些用户的下眼睫毛较长,摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果。因此在本技术中,图像采集装置1设置在穿戴式眼动仪的侧面,可以设置在两个镜腿2或两个鼻托3朝向眼球的一侧上,来采集眼球的侧面图像,由于眼球侧面没有眼睫毛,因此采集的眼球侧面图像就不会被眼睫毛遮挡,不会缺少关键数据,因此计算眼睛注视位置时会更为精确。
45.步骤103:处理器接收所述图像采集装置1采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。
46.值得注意的是,处理器接收图像采集装置1采集的侧面眼球图像后,会根据侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。具体的,处理器先通过图像采集装置1采集的多张图像或视频来确定用户眼球的运动轨迹,再根据用户眼球的轨迹变化与显示装置(镜片)的不同位置的坐标之间的映射关系,获取用户眼球聚焦在显示装置上的眼睛注视位置,即用户眼球聚焦在穿戴式眼动仪的显示装置上的坐标。
47.上述眼动跟踪方法,通过向发光装置发送第一控制指令来控制发光装置发射光
线,并向图像采集装置1发送第二控制指令来控制图像采集装置1采集侧面眼球图像,再接收图像采集装置1采集的侧面眼球图像,根据侧面眼球图像进行眼动跟踪计算,最终得到眼睛注视位置。在穿戴式眼动仪的侧面设置图像采集装置1,使得图像采集装置1采集的图像是眼球侧面的图像,侧面可以是眼球外侧或内侧,由于眼球侧面没有眼睫毛,因此采集的眼球侧面图像就不会被眼睫毛遮挡,不会缺少关键数据,因此计算眼睛注视位置时会更为精确。
48.在一个具体的实施例中,眼动跟踪计算的步骤如下:
49.步骤1031:处理器接收所述图像采集装置1采集的侧面眼球图像,检测发光装置发射的红外光经过眼球反射后在侧面眼球图像上形成的光斑,得到光斑信息;
50.步骤1032:处理器检测在侧面眼球图像中的人眼瞳孔的轮廓或中心点,得到瞳孔信息;
51.步骤1033:处理器基于光斑信息和瞳孔信息,计算眼球运动轨迹参数;
52.步骤1034:处理器获取显示装置的位置信息,基于眼球运动轨迹参数和显示装置位置信息,得到眼球聚焦在显示装置上的眼睛注视位置。
53.其中,在步骤1033中,可以通过二维映射或三维眼球模型来计算眼球运动轨迹参数,眼球运动轨迹参数可以是瞳孔-角膜向量或角膜曲率中心、物理瞳孔中心等信息表达的人眼空间视线方向。在步骤1034中,可以根据显示装置成像光路对人眼空间视线方向进行投射计算,也可以根据显示装置坐标与眼球运动轨迹参数之间的关系进行回归拟合。
54.在一个具体的实施例中,在所述接收所述图像采集装置1采集的侧面眼球图像之后,还包括:向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。
55.值得注意的是,在获取图像采集装置1采集的侧面眼球图像之后,还需要对采集的侧面眼球图像做进一步处理,具体包括行去噪、净化、切割等处理,处理后的图像能够用于眼动跟踪计算。
56.如图2所示,在一个具体的实施例中,所述图像采集装置1设置在所述穿戴式眼动仪的镜腿2朝向眼球的侧面上,且所述图像采集装置1的位置与用户两个瞳孔中心点之间的连线处于同一个平面。
57.值得注意的是,在图2的下方局部放大图中,显示了图像采集装置1设置在一个镜腿2上,实际上,图像采集装置1可以同时设置在两个镜腿2上。在现有的穿戴式眼动仪中,图像采集装置1都是设置在显示装置(镜片)的下方,且摄像头模块与眼球的连线,和眼球与镜片所在平面的垂线之间有一个夹角,便于一次采集更多的眼球图像数据,但不同的用户的下眼睫毛的长度不一致,有些用户的下眼睫毛较长,摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果。因此在本实施例中,图像采集装置1设置在穿戴式眼动仪的镜腿2朝向眼球的侧面上,且图像采集装置1的位置与用户两个瞳孔中心点之间的连线处于同一个平面。此时图像采集装置1采集的方向是镜腿2朝向眼球的方向,且两个眼球瞳孔中心点与图像采集装置1的连线是一条直线或在同一个平面内。即从眼球外侧面采集眼球图像,眼球外侧面没有睫毛或其他东西的阻挡,因此采集的眼球数据不会因遮挡而缺失数据,这样进行眼球追踪计算是更加准确,眼动追踪效果更好。
58.如图2所示,在一个具体的实施例中,所述图像采集装置1设置在所述穿戴式眼动仪的鼻托3朝向眼球的侧面上,且所述图像采集装置1的位置在用户两个瞳孔中心点之间的连线上。
59.值得注意的是,在图2的下方局部放大图中,显示了图像采集装置1设置在一个鼻托3上,实际上,图像采集装置1可以同时设置在两个鼻托3上。在现有的穿戴式眼动仪中,图像采集装置1都是设置在显示装置(镜片)的下方,且摄像头模块与眼球的连线,和眼球与镜片所在平面的垂线之间有一个夹角,便于一次采集更多的眼球图像数据,但不同的用户的下眼睫毛的长度不一致,有些用户的下眼睫毛较长,摄像头模块拍摄图像时,眼球有一部分会被下眼睫毛遮挡住,这样就会导致采集的眼球图像缺少关键数据,最终在计算时出现误差,影响眼动跟踪的效果。因此在本实施例中,图像采集装置1设置在穿戴式眼动仪的鼻托3朝向眼球的侧面上,且图像采集装置1的位置与用户两个瞳孔中心点之间的连线上。此时图像采集装置1采集的方向是鼻托3朝向眼球的方向,且两个眼球瞳孔中心点与图像采集装置1的连线是一条直线或在同一个平面内。即从眼球内侧面采集眼球图像,眼球内侧面没有睫毛或其他东西的阻挡,因此采集的眼球数据不会因遮挡而缺失数据,这样进行眼球追踪计算是更加准确,眼动追踪效果更好。
60.在一个具体的实施例中,所述发光装置为红外泛光发射装置,所述图像采集装置1为红外摄像头。
61.值得注意的是,在本实施例中,发光装置为红外泛光发射装置,能发射红外线,用于照亮人眼。且红外泛光发射装置设置的位置与用户眼球之间没有阻挡。红外摄像头能在黑暗中成像红外图。
62.如图3所示,第二方面,提出了一种眼动跟踪装置,应用于穿戴式眼动仪,所述装置包括:
63.第一发送模块201,用于向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线;
64.第二发送模块202,用于向图像采集装置1发送第二控制指令,所述第二控制指令用于控制图像采集装置1采集侧面眼球图像,所述图像采集装置1设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像;
65.计算模块203,用于接收所述图像采集装置1采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。
66.上述眼动跟踪方法及装置,通过向发光装置发送第一控制指令来控制发光装置发射光线,并向图像采集装置1发送第二控制指令来控制图像采集装置1采集侧面眼球图像,再接收图像采集装置1采集的侧面眼球图像,根据侧面眼球图像进行眼动跟踪计算,最终得到眼睛注视位置。在穿戴式眼动仪的侧面设置图像采集装置1,使得图像采集装置1采集的图像是眼球侧面的图像,侧面可以是眼球外侧或内侧,由于眼球侧面没有眼睫毛,因此采集的眼球侧面图像就不会被眼睫毛遮挡,不会缺少关键数据,因此计算眼睛注视位置时会更为精确。
67.在一个具体的实施例中,所述计算模块203还用于接收所述图像采集装置1采集的侧面眼球图像,检测发光装置发射的红外光经过眼球反射后在侧面眼球图像上形成的光斑,得到光斑信息;检测在侧面眼球图像中的人眼瞳孔的轮廓或中心点,得到瞳孔信息;基
于光斑信息和瞳孔信息,计算眼球运动轨迹参数;获取显示装置的位置信息,基于眼球运动轨迹参数和显示装置位置信息,得到眼球聚焦在显示装置上的眼睛注视位置。
68.在一个具体的实施例中,所述装置还包括:第三发送模块204,用于向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。
69.在一个具体的实施例中,所述图像采集装置1设置在所述穿戴式眼动仪的镜腿2朝向眼球的侧面上,且所述图像采集装置1的位置与用户两个瞳孔中心点之间的连线处于同一个平面。
70.在一个具体的实施例中,所述图像采集装置1设置在所述穿戴式眼动仪的鼻托3朝向眼球的侧面上,且所述图像采集装置1的位置在用户两个瞳孔中心点之间的连线上。
71.在一个具体的实施例中,所述发光装置为红外泛光发射装置,所述图像采集装置1为红外摄像头。
72.在一个实施例中,提供了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行上述眼动跟踪方法的步骤。
73.图4示出了一个实施例中计算机设备的内部结构图,如图4所示,该计算机设备包括通过终端总线连接的处理器、存储器和网络接口。其中,存储器包括非易失性存储介质和内存储器。该计算机设备的非易失性存储介质有存储操作终端,还可有存储计算机程序,该计算机程序被处理器执行时,可使得处理器实现上述的眼动跟踪方法。该内存储器中也可储存有计算机程序,该计算机程序被处理器执行时,可使得处理器执行上述的眼动跟踪方法。本领域技术人员可以理解,图4中示出的结构,仅仅是与本技术方案相关的部分结构的框图,并不构成对本技术方案所应用于其上的设备的限定,具体的设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
74.在一个实施例中,提出了一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述眼动跟踪方法的步骤。
75.可以理解的是,上述眼动跟踪方法、装置、计算机设备及存储介质属于一个总的发明构思,实施例可相互适用。
76.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,本技术所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(rom)、可编程rom(prom)、电可编程rom(eprom)、电可擦除可编程rom(eeprom)或闪存。易失性存储器可包括随机存取存储器(ram)或者外部高速缓冲存储器。作为说明而非局限,ram以多种形式可得,诸如静态ram(sram)、动态ram(dram)、同步dram(sdram)、双数据率sdram(ddrsdram)、增强型sdram(esdram)、同步链路(synchlink)dram(sldram)、存储器总线(rambus)直接ram(rdram)、直接存储器总线动态ram(drdram)、以及存储器总线动态ram(rdram)等。
77.以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛
盾,都应当认为是本技术记载的范围。
78.以上所述实施例仅表达了本技术的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本技术专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本技术构思的前提下,还可以做出若干变形和改进,这些都属于本技术的保护范围。因此,本技术专利的保护范围应以所附权利要求为准。

技术特征:
1.一种眼动跟踪方法,其特征在于,应用于穿戴式眼动仪,所述方法包括:向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线;向图像采集装置发送第二控制指令,所述第二控制指令用于控制图像采集装置采集侧面眼球图像,所述图像采集装置设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像;接收所述图像采集装置采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。2.如权利要求1所述的眼动跟踪方法,其特征在于,在所述接收所述图像采集装置采集的侧面眼球图像之后,还包括:向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。3.如权利要求2所述的眼动跟踪方法,其特征在于,所述图像采集装置设置在所述穿戴式眼动仪的镜腿朝向眼球的侧面上,且所述图像采集装置的位置与用户两个瞳孔中心点之间的连线处于同一个平面。4.如权利要求2所述的眼动跟踪方法,其特征在于,所述图像采集装置设置在所述穿戴式眼动仪的鼻托朝向眼球的侧面上,且所述图像采集装置的位置在用户两个瞳孔中心点之间的连线上。5.如权利要求1所述的眼动跟踪方法,其特征在于,所述发光装置为红外泛光发射装置,所述图像采集装置为红外摄像头。6.一种眼动跟踪装置,其特征在于,应用于穿戴式眼动仪,所述装置包括:第一发送模块,用于向发光装置发送第一控制指令,所述第一控制指令用于控制发光装置发射光线;第二发送模块,用于向图像采集装置发送第二控制指令,所述第二控制指令用于控制图像采集装置采集侧面眼球图像,所述图像采集装置设置在所述穿戴式眼动仪的侧面,用于采集眼球的侧面图像;计算模块,用于接收所述图像采集装置采集的侧面眼球图像,根据所述侧面眼球图像进行眼动跟踪计算,得到眼睛注视位置。7.如权利要求6所述的眼动跟踪装置,其特征在于,所述装置还包括:第三发送模块,用于向图像处理装置发送第三控制指令,第三控制指令用于控制所述图像处理装置对所述侧面眼球图像进行图像处理。8.如权利要求7所述的眼动跟踪装置,其特征在于,所述图像采集装置设置在所述穿戴式眼动仪的镜腿朝向眼球的侧面上,且所述图像采集装置的位置与用户两个瞳孔中心点之间的连线处于同一个平面。9.如权利要求7所述的眼动跟踪装置,其特征在于,所述图像采集装置设置在所述穿戴式眼动仪的鼻托朝向眼球的侧面上,且所述图像采集装置的位置在用户两个瞳孔中心点之间的连线上。10.如权利要求6所述的眼动跟踪装置,其特征在于,所述发光装置为红外泛光发射装置,所述图像采集装置为红外摄像头。

技术总结
本申请提供了一种眼动跟踪方法及装置,通过向发光装置发送第一控制指令来控制发光装置发射光线,并向图像采集装置发送第二控制指令来控制图像采集装置采集侧面眼球图像,再接收图像采集装置采集的侧面眼球图像,根据侧面眼球图像进行眼动跟踪计算,最终得到眼睛注视位置。在穿戴式眼动仪的侧面设置图像采集装置,使得图像采集装置采集的图像是眼球侧面的图像,侧面可以是眼球外侧或内侧,由于眼球侧面没有眼睫毛,因此采集的眼球侧面图像就不会被眼睫毛遮挡,不会缺少关键数据,因此计算眼睛注视位置时会更为精确。睛注视位置时会更为精确。睛注视位置时会更为精确。


技术研发人员:许明秋 梁立伟 张强 王勃飞 陈晨航 杜与涌
受保护的技术使用者:深圳市华弘智谷科技有限公司
技术研发日:2023.04.29
技术公布日:2023/8/13
版权声明

本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

飞行汽车 https://www.autovtol.com/

分享:

扫一扫在手机阅读、分享本文

相关推荐