检索结果-内蒙古大学图书馆

计算机辅助设计与图形学学报 2017年第7期29卷 1256-1266页

作者：王涵夏时洪中国科学院计算技术研究所前瞻研究实验室/移动计算与新型终端北京市重点实验室北京100190 中国科学院大学北京100049

为了从单张图片中自动快速重建高细节人脸表情模型,提出一种从粗到细逐步优化的方法.首先从单张照片检测到的特征点中,通过多初值迭代方法优化求解对应的三维头部姿态和大尺度的人脸表情;其次以检测到的人脸特征点为依据对不准确的人脸... 详细信息

为了从单张图片中自动快速重建高细节人脸表情模型,提出一种从粗到细逐步优化的方法.首先从单张照片检测到的特征点中,通过多初值迭代方法优化求解对应的三维头部姿态和大尺度的人脸表情;其次以检测到的人脸特征点为依据对不准确的人脸表情进行矫正,并使用非刚性的迭代最近点方法对齐模型上的特征点和图像特征点,使用拉普拉斯坐标影响其余非特征点位置;最后使用带有常量假设的明暗重建形状方法为人脸模型重建细尺度的几何细节,以增加重建模型的逼真度.实验结果表明,文中方法能够在头部大幅度摆动的情况下生成更准确的带有几何细节的人脸模型;该方法不需要对图片的摄像机进行标定,也不需要预先训练或预设用户的特征模型和混合形状,同时不强制约束室内光照以及单调的背景环境.

关键词：图像重建人脸模型多线性模型方法非刚性迭代最近点方法拉普拉斯变形明暗重建形状

来源：评论

学校读者我要写书评

暂无评论

一种无标记的身体与面部运动同步捕获方法

引用

软件学报 2019年第10期30卷 3026-3036页

作者：王志勇王从艺张子豪袁铭择夏时洪移动计算与新型终端北京市重点实验室(中国科学院计算技术研究所前瞻研究实验室) 北京100190 中国科学院大学北京100049

提供了一个无标记点的身体与面部运动同步捕获的方法.利用经过时间同步和空间标定的长焦彩色相机和 Kinect 相机来进行同步捕获.利用在环境中加入闪光来进行时间同步,使用张氏标定法进行空间标定,从而组成一组时间同步且空间对齐的混合... 详细信息

提供了一个无标记点的身体与面部运动同步捕获的方法.利用经过时间同步和空间标定的长焦彩色相机和 Kinect 相机来进行同步捕获.利用在环境中加入闪光来进行时间同步,使用张氏标定法进行空间标定,从而组成一组时间同步且空间对齐的混合相机(hybrid camera).然后利用 Kinect fusion 扫描用户的人体模型并嵌入骨骼.最后利用时间和空间都对齐好的两个相机来进行同步采集.首先从深度图像中得到人脸的平移参考值,然后在平移参考值的帮助下根据彩色图像的 2D 特征点重建人脸.随后,把彩色图像中得到的头部姿态传递给身体捕获结果.结果对比实验和用户调研实验均表明所提出的运动捕获的结果要好于单个的运动捕获结果.

关键词：运动捕获人脸人体同步运动捕获深度图像多线性模型方法非刚性迭代最近点方法

来源：评论

学校读者我要写书评

暂无评论

增加表情细节的视频驱动人脸动画方法研究

增加表情细节的视频驱动人脸动画方法研究

引用

作者：王涵中国科学院大学

学位级别：博士

自二十世纪六十年代以来，计算机动画发展迅速，其中的人脸表情动画是动画领域的重要组成部分。而传统的表情动画的自动生成方法耗时耗力，低成本的表情动画的自动生成方法一直是研究热点。其中视频驱动人脸动画研究是成本最低的动画生... 详细信息

自二十世纪六十年代以来，计算机动画发展迅速，其中的人脸表情动画是动画领域的重要组成部分。而传统的表情动画的自动生成方法耗时耗力，低成本的表情动画的自动生成方法一直是研究热点。其中视频驱动人脸动画研究是成本最低的动画生成方法，由于其缺失了深度信息，有光线干扰等原因，其生成的表情最粗糙，依然有很大的提升空间。基于此，本文主要研究如何提升视频驱动人脸动画的准确度和精细度。本文具体对增加表情细节的视频驱动人脸动画方法进行研究，首先研究视频驱动人脸大尺度表情动画，然后研究如何通过单帧视频或单张照片重建带有几何细节的人脸表情模型，最后通过扫描实例来优化表情基模型以增强最终动画结果的效果。所取得的研究成果如下:\n (1)基于语义表情基的视频驱动人脸动画\n 传统的视频驱动人脸动画以2D特征点作为表情的定义，使用的特征点位置与追踪到人脸特征点匹配作为优化目标来求解表情参数。而2D人脸特征点一般带有很大噪声，与头部姿态容易耦合;同时将所有表情参数不加区分的同时求解方式，忽略了不同区域之间表情参数互不影响和表情参数重要性区分，不能够求解出准确的表情参数，使最终生成的表情动画对视频中表情运动并不敏感。针对上述问题，本文提出了基于语义表情基的视频驱动人脸动画方法。\n a、我们提出一种基于2D人脸特征点的语义表情定义方法，该方法考虑追踪到的二维人脸特征点在器官边缘处能够得到较稳定的人脸特征点，而在人脸轮廓处得到较不准确的特征点，挑选和增强稳定特征点之间的关系，剔除和弱化不稳定特征点之间的关系来增强表情估算的稳定性。\n b、我们结合表情基的特性，提出表情参数化的分区优化方法。考虑每个表情基都只在一个局部的区域内变动，而其它区域尽量保持不动，我们将这些变动的区域划分为几大块。这样每个区域内的表情基变动相互影响，而不同区域的表情基变动互不影响。根据这个区域划分，我们采用分区表情参数化的方法，即同一区域的表情参数放在一起优化，并且添加参数加和不超过常数的约束;而不同区域之间的表情参数则没有相互关系的约束。这样我们在每个分区域可以估算更加准确的人脸表情。\n c、结合表情重要性排序，提出表情参数化的分步优化方法。考虑不同表情基重要性是不同的，但是逐个表情基按照不同的重要性来优化表情参数则大大降低估算表情动画的效率，违背了我们要实时驱动人脸动画的初衷。我们结合上述分区划分，将不同区的表情基按照其所属于的区域的重要性来优化表情参数，这样既能考虑表情基的重要程度不同，又保证了表情动画估算的速度。\n (2)单张图片重建带有几何细节的人脸模型\n 从单目相机拍摄的视频或图像中重建人脸表情，只能重建大尺度的人脸表情。基于数据的方法可以生成稳定的大尺度表情，但是在头部姿态估算和表情估算的准确度上还远远不够。明暗重建形状方法可以从图片中重建几何细节，但是由于边界处法向量变化急剧，估算的深度信息在边界处还存在很大误差。\n a、我们提出一种多初值的头部姿态优化方法来增加头部姿态估计的准确性。由于人脸追踪的二维特征点的稀疏性，以及其本身具备一些噪声，仅仅以这个匹配作为优化目标将会有非常多局部最优解。因此我们使用多初值的方法，每个初值都将收敛到一个局部最优解，我们取前几个误差最小的解做平均作为最优解，以此得到更稳定的最优解。\n b、我们提出一种二维稀疏特征点驱动的人脸变形方法。我们使用拉普拉斯变形，将二维特征点与合成的粗略表情之间的差异传播到其它非特征点位置上去。并且在变形时，考虑深度值尽可能保持与原模型相近来保证变形的平滑性。这样就可以突破表情基空间的局限，并且对表情基生成的准确性要求也大大降低。\n c、我们可以使用基于常量假设的明暗重建形状方法，将2D图像中人脸上的细节（例如法令纹、酒窝等）重建成3D几何信息。考虑到模型的法向量可由深度图计算得到，而在边界处的深度急剧变化导致边界处法向量带有很大的误差，需要对其进行强边界约束。但是由于图像中头部姿态各异，边界无法快速判断。我们基于人脸平缓变化这一观察，提出基于常量假设的方法来解决这个问题。\n (3)基于扫描实例的个性化表情基生成\n 传统的变形生成表情基的方法没有考虑表情基的合理性问题，而基于数据生成表情基方法没有考虑表情基的个性化问题。少数考虑了个性化表情基的方法，则没有考虑如何从不同拓扑的实例来优化表情基。\n 本文提供了一个基于扫描实例的表情基优化方法。我们的方法首先通过手工点选的稀疏点云建立扫描实例与表情基模型的对应关系，通过求解表情参数获得与表情基模型相同网格结构的近似表情，通过迭代最近点方法和中位数倍数阈值来建立扫描实例与表情基模型的逐点对应关系，最后通过迭代表情参数与表情基的方式逐步获得个性化的表情基。

关键词：视频驱动人脸动画多线性模型方法语义表情基

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：