图1:论文提出的注视点预测模型的网络架构 论文提出的注视点预测模型融合了自下而上的基于图像/视频的视觉信息和自上而下的基于任务的高层信息,方法架构如图 1 所示。首先,由于人的注视点通常是向着视野中的显著区域,本文提出的模型首先基于一个自下而上的显著性预测模块(Saliency Prediction Module,SP)。以第一人称视频作为输入,作者采
对第一标定图像进行修正,得到多个第二标定图像和每个第二标定图像的注视点的标定位置;根据待测图像、多个第二标定图像、和每个第二标定图像的注视点的标定位置,确定待测图像的注视点的预测位置;根据待测图像的注视点的预测位置,触发电子设备执行相应的操作。
摘要:针对已有注视点预测模型存在特征细节缺失、尺度单一和背景信息干扰严重导致的注视点预测精度偏低等 问题,提出了一种基于超复数小波和图像空域的卷积网络融合注视点预测算法.首先,针对细节特征丢失问题,使 用超复数小波变换在频域中提取图像的细节特征,与卷积网络提取的空域特征进行融合.然后,通过空洞空间金字 塔...
(映维网 2021年01月30日)根据一篇论文,俄罗斯的研究人员开发了一个可以帮助精确预测下一个注视点,以减少因眨眼造成的误差的数学模型。 这篇发表在SID Symposium Digest of Technical Papers的研究论文表明,所述模型能够提升追踪注视点渲染的精度。 俄罗斯人民友谊大学的研究员维克托·贝尔亚耶夫(Viktor Belyaev)表示:“...
具有中央显示和注视预测功能的HMD 苹果公司这项专利名为“具有偏向显示和注视点预测的电子设备”的专利,该专利涵盖了一种用于高端头戴式显示设备的先进注视点追踪和预测系统,该设备可以用于玩电子游戏等。由于用于注视点控制的相机系统是与偏光显示器一起工作,因此本发明用于完整头显设备而不是眼镜的可能性非常高。...
1、基于四元数谱方法基于四元数谱方法的的预测预测眼睛注视点显著性检测眼睛注视点显著性检测作者:Boris Schauerte and Rainer Stiefelhagen卡尔斯鲁厄技术学院Anthropomatics, Vincenz-Prieynitz-Str.376131 Karlsruhe 研究所,德国 基于四元数谱方法的预测眼睛注视点显著性检测基于四元数谱方法的预测眼睛注视点显著性...
显著性特征的交通标志预测方法 ,对于复杂的大 型标志 ,如可变信息标志以及指路标志等 ,平均相 似度达到80% 以上 ,认为注视点实测序列与预测 序列相似度较高 ,平均线性距离小于0 .1 ,预测效 果较好 .而这种方法对于单图像标志 ,比如警告标 志以及禁令标志等 ,平均相似度低于 50% ,认为 注视点实测序列与预测...
日前,来自中国北京大学、香港大学及美国马里兰大学的研究团队发布了《DGaze:动态场景中基于CNN的注视预测》研究论文,进一步扩展了关于注视点预测模型的探索工作。 该论文发布于IEEE TVCG(IEEE Transactions on Visualization and Computer Graphics)期刊,以北京大学图形与交互技术实验室的 Zhiming Hu 为第一作者、Sheng Li ...
基于图像显著性特征的交通标志注视点预测方法
摘要 针对已有注视点预测模型存在特征细节缺失、尺度单一和背景信息干扰严重导致的注视点预测精度偏低等问题,提出了一种基于超复数小波和图像空域的卷积网络融合注视点预测算法.首先,针对细节特征丢失问题,使用超复数小波变换在频域中提取...展开更多 Gaze based prediction algorithms has a wide range of applications in...