福建开源眼动追踪
11月12日,松鼠AI携手IEEE(LTSC)、造就共同举办了第四届AI+智适应教育峰会(AIAED),会议邀请了近30位国内外前列**、学者,共同探讨未来教育的发展与变革,北京七鑫易维应邀参会。峰会上各国前列**阐述了教育在当下的发展与未来发展的趋势。�V学教育-松鼠AI创始人、首席教育技术科学家栗浩洋提出“给素质教育减负与AI素质教育”的想法。秉承这一理念,松鼠AI决定将眼动追踪的AI融进教育场景里,并将之产品化,与致力于机器视觉和人工智能领域的高新科技企业七鑫易维达成战略合作。七鑫易维专注眼动追踪技术,已落地很多场景应用,如与**体育总局合作,通过眼动分析对运动员疲劳检测分析。教育解决方案将是眼动技术应用的另一个推广方向。眼动技术的**价值有两方面:一方面是‘以眼观心’,眼睛运动是大脑认知的外化,通过分析眼动轨迹可以探索脑思维模式。另一方面是基于眼控的人机交互,用眼睛解放双手。基于此,�V学教育-松鼠AI与七鑫易维将会从学生阅读的眼动模式分析学习掌握程度、学习习惯等;通过眼控、头控技术辅助特殊场景下学生学习等维度展开项目合作,落地产品解决方案。双方相信,眼动追踪技术的加入将对未来AI+教育行业带来新的变革。眼动追踪让智能设备更懂用户的情绪变化。福建开源眼动追踪

当然除了画面渲染方面,眼球追踪技术还可以大幅度提升VR设备的交互体验。用户通过眼球转动与VR用户界面的交互可以直接用眼控控制菜单,触发操作,让人摆脱不自然的头部操作。眼球追踪技术在VR领域的重要性已经显而易见,Oculus的创始人PalmerLuckey也曾表示,眼部**技术会成为VR技术未来的一个“重要组成部分”。不*能实现注视点渲染技术,它还能用来创造一种深度传感,以创作出更好的用户界面。众所周知光线在穿透透镜过程中会产生折射,所以目前的VR显示设备视角边缘都产生畸变和色差。Oculus正使用适用的光学优势试图修复该问题,但*凭光学设计并无法完美解决,还需要在软件方面进行反畸变和色散的优化。现在已经有部分产品采用了以镜片中心为准的矫正方案,虽然有所成效,但是当人眼位置与镜片位置发生偏移时,反畸变的效果就会随之减弱。若让反畸变处理结合眼球追踪技术,将矫正方案调整为以人眼注视中心为准而不是镜片中心为准,矫正效果也会大幅提升。眼球追踪技术对于VR来说就像鼠标于windows系统一样,它会让体验更完善,使用更方便,更容易被用户接受,虽然在VR设备上成功搭载眼球追踪技术的案例并不多,但是参照目前VR显示方案的快速迭代。青海视觉眼动追踪技术用眼动追踪分析驾驶时视线分布。

此外,眼动技术还在远程医疗、医疗数据分析等领域发挥着重要作用。通过远程眼动监测,医生可以实时了解患者的视觉状态,为远程诊疗提供有力支持。在医疗数据分析方面,眼动技术能够提取和分析大量的眼球运动数据,为疾病的预测、诊断和***提供科学依据。三、未来展望:眼动技术**医疗健康新变革展望未来,眼动技术将在医疗健康领域发挥更加重要的作用。随着技术的不断进步和应用的不断拓展,眼动技术有望在更多细分领域实现突破,为医生提供更精细、更高效的诊断工具,为患者带来更个性化、更舒适的医疗服务体验。同时,眼动技术还将与其他先进技术如人工智能、大数据等深度融合,共同推动医疗健康的数智化转型。例如,通过结合人工智能技术,眼动技术可以实现对眼球运动数据的智能分析和处理,提高诊断的准确性和效率。在医疗数据分析方面,眼动技术也可以与其他生物识别技术相结合,为疾病的预测和诊断提供更加***的数据支持。
图1人眼正视图图2人眼生理结构图(1)巩膜:是人类眼球白色的**部分,是保护眼球内部结构的**外层纤维膜。(2)角膜:是人眼**外层的一层透明薄膜,具有十分敏感的光线感知神经末梢,不但可以保护眼球内部,并且具有很强折光能力。角膜具有自己的曲率且不可调节,不同人的角膜曲率各不相同并且角膜中心是**高点。图1中O2为角膜曲率中心。(3)虹膜:虹膜是位于黑色瞳孔和白色巩膜之间的圆环状部分,其包含有很多相互交错的斑点、细丝、冠状、条纹、隐窝等的细节特征。而且虹膜在胎儿发育阶段形成后,在整个生命历程中将是保持不变的。这些特征决定了虹膜特征的***性,同时也决定了身份识别的***性。因此,可以将眼睛的虹膜特征作为每个人的身份识别对象。(4)瞳孔:眼睛中心颜色更深的环形部分就是瞳孔,人类可以根据外界不同的光线强度条件反射地通过虹膜肌的运动调节瞳孔大小及形状,进而将外界光线进入瞳孔的数量控制在一定范围内。图1中O1为瞳孔中心。(5)晶状体:晶状体和照相机里的镜头非常相似,是眼球中比较重要的屈光间质之一。晶状体对通过瞳孔进入的光线具有折射作用,并且其形状和曲率可变,在不同距离观测目标物体时使眼球聚光的焦点汇聚到视网膜上。。眼动追踪让智能玩具更具互动性。

智能眼镜发展以来眼动追踪技术一直是一个被**AR/VR行业严重低估的技术,眼动追踪至今还没有进入主流的公众视野。大多数业内人士对眼动追踪技术的应用可能只是停留在交互技术(眨眼),或者用于做心理学(认知)分析的仪器,殊不知眼动追踪技术对于智能眼镜走向消费者有着重要的战略意义。接下来我通过眼动发展现状,中美AR/VR眼动追踪**数对比,眼动追踪应用,眼动追踪技术来进行讲解。一、眼动发展现状1.眼动追踪融资情况2014年末,三星投资了FOVE,主打眼球追踪的VR头盔;2016年10月,Google收购专注于眼球追踪的初创公司Eyefluence,布局AR交互;2017年初Facebook旗下Oculus确认收购TheEyeTribe,将眼球追踪技术改善产品;2017年6月,苹果公司收购了德国计算机视觉公司SensoMotoricInstruments(SMI),打造苹果AR眼镜。眼动追踪在医疗上可辅助诊断眼疾。上海人机交互眼动追踪器图片
运用眼动追踪,可分析用户对广告的关注度。福建开源眼动追踪
分别自***眼球帧13和场景帧15提取出***子帧35和第二子帧55。参考图1、图2、图3、图4和图5,本案的***子帧35和第二子帧55可各自单独地或组合地被运算以得到眼球估计位置(步骤6)。以单独运算***子帧35来说,是利用前一帧眼睛的二维/三维近似推估为现在帧(第二眼球帧)眼睛所在的位置,舍弃掉前一帧(***子帧35)中非眼睛影像的脸部影像33,数据量的降低有助于推估现在帧眼睛所在的位置的运算时间,同时降低运算耗电量。其次,以单独运算第二子帧55来说,重点区域影像51通常是配戴者感兴趣的位置,即是配戴者的眼睛可能注视的方向,故将包括重点区域影像51的第二子帧55利用适当的反向运算,例如反向投影矩阵的运算,可以推估配戴者的眼球在相对于眼摄像装置22的哪个位置。又,若同时依据***子帧35和第二子帧55的运算来得到眼球估计位置,可得到更精确和精细的结果,同时达到降低运算耗电量的目的。之后,眼摄像装置22可依据上述眼球估计位置撷取包括眼球影像的第二眼球帧(步骤8)。此时,此第二眼球帧57,例如近似***子帧35的范围,必包括眼球估计位置的影像58,第二眼球帧的数据量可以等于或少于***眼球帧13。虽然本发明已以实施例揭露如上,然其并非用以限定本发明。福建开源眼动追踪