您现在的位置:首页 >> IT >> 正文
邓释天论人脸识别技术的终极形态VR人脸识别实时成像(节选)
发表时间:2019年4月16日 08:50 来源:新科技 责任编 辑:U

摘要:通过对人脸识别以及3D重建技术的研究,本文使用手机前置镜头拍摄正脸和侧脸照片,根据陀螺仪角度和面部形体解剖特点测算3维立体空间的顶点信息,并把顶点信息通过智能判定转为多边形模型信息,最后根据多边形模型特征推算出人脸结构特征,并赋予人工智能信息,实现虚拟角色的人脸识别和表情识别等AI特质。最后根据识别的特征信息连接3D毛发和身体形体、配饰等,即完成真正的人脸识别与3D重建,并且具有实时交互功能。

1、引言

虽然近年来,人脸识别取得了长足的进步,但是仍受到一些因素的制约,如人脸角度、光照条件和表情的不同变化等。通过对人脸识别以及3D重建技术的研究可知,人脸识别算法是模式识别和计算机视觉领域一个重要的研究内容[1-2]。

2014年Kzaemi[3]等人提出了一个用于学习整体回归树的通用框架,这个框架优化了平方误差损失的和,并且自然的处理丢失或部分标记的数据。可以直接从像素强度的稀疏子集估计得人脸的标记点位置。采用标准数据即可训练参数,并且计算速度非常快。1996年Scharstein和SZELISKI提出了几种基于迭代扩散支持的不同视差假设下的算法,并根据视差估计的当前质量对扩散量进行了局部控制;同时提出了一种明显优于基于区域匹配和规则扩散的新的贝叶斯估计方法。2010年Beeler[4]提出了一种用于捕获毛孔尺度几何图形的标准立体重建方法(modifinement),它使用一种定性的方法来产生视觉逼真的结果。同时提出了一种适合于面部捕捉系统的校准方法。系统贡献包括在演播室设置中的捕捉,包括在演播室中的捕捉,从消费者的双目立体相机上捕捉,扫描不同性别、种族和年龄的面孔,捕捉。具有高度瞬态的面部表情,并扫描物理掩膜以提供地面真相验证。

上述方法在实验室数据中都取得了一定的成效,但是对于实际情况下光照和角度更为复杂的人脸图片,识别性能却不尽如人意,本文使用手机前置镜头拍摄正脸和侧脸照片,根据陀螺仪角度和面部形体解剖特点测算3维立体空间的顶点信息,并把顶点信息通过智能判定转为多边形模型信息,最后根据多边形模型特征推算出人脸结构特征,并赋予人工智能信息,实现虚拟角色的人脸识别和表情识别等AI特质。

2、算法的预处理和初始化

通过对人脸识别以及3D重建技术的研究,提出了动态提取特征的方法[5-6]用于提取不同角度下的人脸特征。算法流程图如图1所示。

图片1.jpg

图1 基于不同角度的人脸3D重建算法流程图

3、人脸3D重建

记为一个向量为3D人脸的位置信息:

图片3.jpg
其中,
图片10.jpg
个结点中第
图片33.jpg
个的坐标信息为
图片11.jpg
。新的形状模型可表示为:
图片4.jpg
其中,
图片21.jpg
为形状向量的因子系数向量,表示平均形状,形状信息前
图片34.jpg
个主成分向量组成的矩阵为
图片35.jpg
。定义2D形状向量
图片36.jpg
,新的2D形状模型表示为:
图片5.jpg
其中,
图片14.jpg
图片15.jpg
轴部分为
图片16.jpg
图片17.jpg
,将3D形状模型
图片12.jpg
以估计的人脸角度旋转,然后再映射至
图片43.jpg
图片44.jpg
其中,
图片23.jpg
为角度旋转矩阵,
图片24.jpg
为映射矩阵,可得新的重建公式为:
图片39.jpg
通过上述研究可知系数向量
图片40.jpg
不变。

4、动态特征提取

[1]  [2]  [3]  
高层访谈
蚂蚁金服副总裁刘伟光:构筑敏捷能力中心,打造下一代数字银行“操作..
蚂蚁金服副总裁刘伟光在演讲中指出,银行数字化转型是一个逐步递进的旅程,敏捷能力中心的打造..
凌动智行史文勇:品智出行, 重新定义车辆对生活的价值和意义
众所周知,手机是基础的通讯工具,车是基础的交通或者出行工具,而发动机是传统车里面非常高的..
观点态度
云计算的第二个十年:三大运营商如何迎接?
2018年,我国云计算进入第二个十年。站在国家方队里三大运营商的云计算也进入了新的发展阶段。<..
国内手机市场半年报:头部格局定型 中小品牌陷入集体焦虑
2018年已过半,回看这半年, 头部品牌的吸附效应越来越明显,中小品牌正陷入到集体焦虑中。

..
移动互联
手机
智能设备
汽车科技
通信
IT
家电
办公打印
企业
滚动
相关新闻
关于我们 | 联系我们 | 友情链接 | 版权声明
新科技网络【京ICP备18031908号-1】
Copyright © 2018 Hnetn.com, All Right Reserved
版权所有 新科技网络
本站郑重声明:本站所载文章、数据仅供参考,使用前请核实,风险自负。