典型文献
自然光普通摄像头的眼部分割及特征点定位数据集ESLD
文献摘要:
目的 眼部状态的变化可以作为反映用户真实心理状态及情感变化的依据.由于眼部区域面积较小,瞳孔与虹膜颜色接近,在自然光下利用普通摄像头捕捉瞳孔大小以及位置的变化信息是当前一项具有较大挑战的任务.同时,与现实应用环境类似的具有精细定位和分割信息的眼部结构数据集的欠缺也是制约该领域研究发展的原因之一.针对以上问题,本文利用在普通摄像头场景下采集眼部图像数据,捕捉瞳孔的变化信息并建立了一个眼部图像分割及特征点定位数据集(eye segment and landmark detection dataset,ESLD).方法 收集、标注并公开发布一个包含多种眼部类型的图像数据集ESLD.采用3种方式采集图像:1)采集用户使用电脑时的面部图像;2)收集已经公开的数据集中满足在自然光下使用普通摄像机条件时采集到的面部图像;3)基于公开软件UnityEye合成的眼部图像.3种采集方式可分别得到1386幅、804幅和1600幅眼部图像.得到原始图像后,在原始图像中分割出眼部区域,将不同尺寸的眼部图像归一化为256×128像素.最后对眼部图像的特征点进行人工标记和眼部结构分割.结果 ESLD数据集包含多种类型的眼部图像,可满足研究人员的不同需求.因为实际采集和从公开数据集中获取真实眼部图像十分困难,所以本文利用UnityEye生成眼部图像以改善训练数据量少的问题.实验结果表明,合成的眼部图像可以有效地弥补数据量缺少的问题,F1值可达0.551.利用深度学习方法分别提供了眼部特征点定位和眼部结构分割任务的基线.采用ResNet101作为特征提取网络情况下,眼部特征点定位的误差为5.828,眼部结构分割的mAP(mean average precision)可达0.965.结论 ESLD数据集可为研究人员通过眼部图像研究用户情感变化以及心理状态提供数据支持.
文献关键词:
真实环境;瞳孔分割;特征点检测;身份识别;在线教育;数据集
中图分类号:
作者姓名:
张俊杰;孙光民;郑鲲;李煜;付晓辉;慈康怡;申俊杰;孟凡超;孔江萍;张玥
作者机构:
北京工业大学,北京 100024
文献出处:
引用格式:
[1]张俊杰;孙光民;郑鲲;李煜;付晓辉;慈康怡;申俊杰;孟凡超;孔江萍;张玥-.自然光普通摄像头的眼部分割及特征点定位数据集ESLD)[J].中国图象图形学报,2022(08):2329-2343
A类:
普通摄像机,UnityEye,瞳孔分割
B类:
自然光,摄像头,眼部,特征点定位,定位数据,ESLD,实心,心理状态,情感变化,区域面积,虹膜,下利,现实应用,应用环境,环境类,精细定位,研究发展,图像分割,eye,segment,landmark,detection,dataset,一个包,部类,图像数据集,采集图像,面部图像,采集方式,原始图像,割出,不同尺寸,图像归一化,像素,人工标记,多种类型,公开数据集,十分困难,训练数据,数据量,补数,深度学习方法,ResNet101,特征提取网络,mAP,mean,average,precision,过眼,图像研究,用户情感,真实环境,特征点检测,身份识别,在线教育
AB值:
0.357691
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。