(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210217987.7 (22)申请日 2022.03.08 (65)同一申请的已公布的文献号 申请公布号 CN 114615484 A (43)申请公布日 2022.06.10 (73)专利权人 常山县亿 思达电子有限公司 地址 324000 浙江省衢州市 常山县新都工 业园区 (72)发明人 刘美鸿　 (74)专利代理 机构 北京冠和权律师事务所 11399 专利代理师 万晶晶 (51)Int.Cl. H04N 13/122(2018.01) H04N 13/194(2018.01)H04N 13/332(2018.01) H04N 13/366(2018.01) H04N 13/398(2018.01) H04N 19/154(2014.01) H04N 5/232(2006.01) G06T 7/00(2017.01) (56)对比文件 US 2019250413 A1,2019.08.15 US 2021072824 A1,2021.0 3.11 CN 105100789 A,2015.1 1.25 WO 201820 0717 A1,2018.1 1.01 CN 105913385 A,2016.08.31 审查员 李方芳 (54)发明名称 一种基于视网膜监视的视域跟踪定位系统 (57)摘要 本发明公开了一种基于视网膜监视的视域 跟踪定位系统， 包括： 视网膜监视摄像模块， 设置 在正对眼球的隐形眼镜上； 所述视网膜监视摄像 模块的摄像视角与眼球视角保持同步； 所述视网 膜监视摄像模块， 用于对眼球底部的视网膜进行 摄像采集， 获取视网膜图像； 传输模块， 分别与服 务器、 视网膜监视摄像模块连接， 用于将所述视 网膜监视摄像模块获取的视网膜 图像传输至服 务器。 使得摄像视角与眼球视角保持一致， 保证 采集到的视网膜图像就是眼睛看到的实际图像， 使得虚实图像融合精度高， 畸变小， 减少眩晕感。 权利要求书2页 说明书8页 附图2页 CN 114615484 B 2022.11.01 CN 114615484 B 1.一种基于 视网膜监视的视域跟踪定位系统， 其特 征在于， 包括： 视网膜监视摄 像模块， 设置在正对眼球的隐形眼镜上； 所述视网膜监视摄 像模块的摄 像视角与眼球视角保持同步； 所述视网膜监视摄 像模块， 用于对眼球底部的视网膜进行摄 像采集， 获取视网膜图像； 传输模块， 分别与服务器、 视网膜监视摄像模块连接， 用于将所述视网膜监视摄像模块 获取的视网膜图像传输 至服务器； 还包括： 图像质量检测模块， 用于： 在所述传输模块将所述视网膜图像传输至服务器前， 将所述视网膜图像分割成若干个 子视网膜图像； 分别计算子 视网膜图像的信噪比， 计算出平均信噪比， 作为第一评价指标； 筛选出信噪比小于预设信噪比的子视网膜图像， 作为待处理图像； 基于canny边缘检测 算法对所述待处理图像进行边缘检测处理， 确定每个待处理图像的边缘区域， 获取边缘区 域的梯度值， 计算出平均梯度值， 作为第二评价指标； 对所述视网膜图像进行光斑检测分析， 根据光斑检测分析结果确定视网膜图像的运动 模糊度， 作为第三评价指标； 基于EVA点锐度算法函数对所述视网膜图像进行清晰度检测处理， 得到图像清晰度， 作 为第四评价指标； 对所述第一评价指标、 第二评价指标、 第三评价指标及第四评价指标进行归一 化处理； 根据归一化处理后的第一评价指标、 第二评价指标、 第 三评价指标及第四评价指标， 计 算出评价分值， 根据所述评价分值及预设规则， 确定视网膜图像的图像质量等级， 在确定所 述图像质量 等级小于预设质量 等级时， 发出报警提 示； 增强模块， 用于： 在所述传输模块将所述视网膜图像传输至服务器前， 将视网膜图像基于滤波器进行处 理， 得到第一图像； 根据所述视网膜图像及所述第一图像进行差分处 理， 得到第二图像； 获取所述第一图像中的像素点在R通道的第一灰度值、 G通道的第二灰度值及B通道 的 第三灰度值； 确定第一图像中的同一像素点的第一灰度值、 第二灰度值及第三灰度值中的最小值， 并根据最小值 生成暗图； 确定所述暗图中平均灰度值最大的区域， 作为目标区域； 将暗图中除所述目标区域外 的其他区域分割成若干个与目标区域大小一 致的待处 理区域； 分别计算所述待处理区域的中心与 所述目标区域的中心之间的距离， 根据所述距离查 询预设的距离 ‑预设灰度值数据 表， 确定预设灰度值， 根据所述预设灰度值及待处理 区域的 平均灰度值， 确定第一调节系 数； 根据所述第一调节系 数对相应的所述待处理区域进行调 节， 得到第一增强图像； 获取所述第二图像上像素点的灰度值， 并确定各灰度值对应的像素点的数量， 形成灰 度值的直方图； 根据标准第二图像确定标准 直方图；权　利　要　求　书 1/2 页 2 CN 114615484 B 2确定所述直方图与所述标准直方图的差异参数， 根据所述差异参数确定第二调节参 数， 根据所述第二调节参数对所述第二图像进行调节， 得到第二增强图像； 将所述第一增强图像与所述第 二增强图像进行自适应加权计算， 得到增强后的视网膜 图像。 2.如权利要求1所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 还包括： 眼 球跟踪模块， 用于捕捉眼球的注视方向和眼球在注视方向的停留时间信息， 构建眼动轨迹， 根据所述眼动轨 迹确定用户状态。 3.如权利要求2所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 所述眼球跟 踪模块根据所述眼动轨 迹确定用户状态， 包括： 将所述眼动轨迹与 数据库中的若干条预设眼动轨迹进行相似度计算； 每条预设眼动轨 迹对应一种用户状态； 确定相似度最高的预设眼动轨 迹作为目标眼动轨 迹； 将所述目标眼动轨 迹对应的用户状态作为所述眼动轨 迹对应的用户状态。 4.如权利要求2所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 所述用户状 态包括用户对于当前观看内容的感应趣的程度。 5.如权利要求1所述的基于 视网膜监视的视域跟踪定位系统， 其特 征在于， 还 包括： 预处理模块， 用于在所述传输模块将所述视网膜图像传输至服务器前， 对所述视网膜 图像进行 预处理。 6.如权利要求5所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 所述预处理 包括图像降噪处 理及图像增强处 理。 7.如权利要求1所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 还包括： 监 测模块， 用于监测所述视网膜监视摄像模块的摄像视角与眼球视角是否保持同步， 在确定 不同步时， 发出报警提 示。 8.如权利要求1所述的基于视网膜监视的视域跟踪定位系统， 其特征在于， 还包括： 压 缩模块， 用于： 在所述传输模块将所述视网膜图像传输至服务器前， 对所述视网膜图像进行分割， 得 到若干个块状图像， 每一个块状图像对应一个图像矩阵， 得到图像矩阵序列； 对所述若干个块状图像进行 快速傅里叶变换处 理， 得到变换矩阵； 根据所述图像矩阵序列及所述变换矩阵， 对所述块状图像进行压缩采样处理， 得到采 样数据； 将所述采样数据根据图像重建算法进行图像重建， 得到 重建图像； 根据所述采样数据确定对视网膜图像的采样率； 根据所述采样率、 所述重建图像的大小及所述视网膜图像的大小， 计算压缩评估值， 并 判断是否小于预设压缩评估值； 在确定所述压缩评估值小于预设压缩评估值时， 发出报警提 示。权　利　要　求　书 2/2 页 3 CN 114615484 B 3