【论文笔记】3D人脸重建_简略版(时时更新中)

2023-11-22 16:32

本文主要是介绍【论文笔记】3D人脸重建_简略版(时时更新中),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

20160221

1. Liu F, Zeng D, Li J, et al. Cascaded regressor based 3d face reconstruction from a single arbitrary view image[J]. arXiv preprint arXiv:1509.06161, 2015.
这篇论文使用了回归的方法基于2D人脸图像来进行人脸3D模型的重建。由于基本回归方法,因此也具备了回归方法的优点,效果更好,速度也更快。同时能够处理人脸关键点部分缺失的情况。
根据人脸3D数据库和相对应的2D人脸图片的关键点对应情况,学习了3D重建的回归模型。回归算法采用了普通的回归算法,对于人脸部分关键点由于姿态原因缺失的情况,将关键点的位移偏差统一采用常数(如 0)表示,这样即可处理关键点部分缺失的情况。论文比较了重建的形状结果与其它方法,精度上有所提高,速度也提升至43ms/每张人脸图.
PS: 这篇文章不涉及2D人脸关键点检测,用到的2D人脸关键点都是预先检测好的。
2. Tulyakov S, Sebe N. Regressing a 3d face shape from a single image[C]//Proceedings of the IEEE International Conference on Computer Vision. 2015: 3748-3755.
它是将人脸关键点检测和3D人脸重建放在一起来完成的,而以往的方法是先做2D人脸的关键点检测,再根据关键点去估计和匹配3D人脸模型。作者说这是第一篇将两者结合的方法,其实ICCV 2015 另一篇文章 Pose-invariant 3d face alignment 也是采用了类似的方法(简介可参考博客 http://blog.csdn.net/shaoxiaohu1/article/details/50525240)。
这篇文章是可以看作是One Millisecond Face Alignment with an Ensemble of Regression Trees的3D版,也就是说检测到的人脸关键点是3D的。在此基础上,作者提出了3D shape feature indexing 用来构造基于树的的回归模型,同时也引入了基于3D模型的姿态估计改进最终的重建精度。作者采用该方法在人脸关键关键点检测和姿态估计上进行了实验,实验证明性能上均比其它方法要好(很奇怪,为什么不直接比较3D重建的结果,却在这两个方面进行比较)。重建速度确实非常快,每张图9ms, 比Pose-invariant 3d face alignment快的多。作者说会放code,暂时还没看到。

PS: * 人脸关键点检测和3D模型的关系越来越紧密了,作者也说基于3D的回归模型越来越普遍。看来以后要在这方法深入研究了。*

20160116

1. Zhu X, Lei Z, Yan J, et al. High-Fidelity Pose and Expression Normalization for Face Recognition in the Wild[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2015: 787-796.
该论文提出了一种基于3D Morphable Model 的姿态和表情正规化的方法,可自动根据不同角度和表情的人脸生成正面角度和正常表情的人脸,从而提高人脸识别率。
首先根据关键点匹配规则建立不同角度下的2D人脸和3D模型的对应关系;建立3D模型,去除角度和表情影响,生成正面、正常表情人脸图;基于Poisson Editting方法恢复脸部由于角度产生的被遮挡区域。

这篇关于【论文笔记】3D人脸重建_简略版(时时更新中)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/411448

相关文章

无人叉车3d激光slam多房间建图定位异常处理方案-墙体画线地图切分方案

墙体画线地图切分方案 针对问题:墙体两侧特征混淆误匹配,导致建图和定位偏差,表现为过门跳变、外月台走歪等 ·解决思路:预期的根治方案IGICP需要较长时间完成上线,先使用切分地图的工程化方案,即墙体两侧切分为不同地图,在某一侧只使用该侧地图进行定位 方案思路 切分原理:切分地图基于关键帧位置,而非点云。 理论基础:光照是直线的,一帧点云必定只能照射到墙的一侧,无法同时照到两侧实践考虑:关

poj3468(线段树成段更新模板题)

题意:包括两个操作:1、将[a.b]上的数字加上v;2、查询区间[a,b]上的和 下面的介绍是下解题思路: 首先介绍  lazy-tag思想:用一个变量记录每一个线段树节点的变化值,当这部分线段的一致性被破坏我们就将这个变化值传递给子区间,大大增加了线段树的效率。 比如现在需要对[a,b]区间值进行加c操作,那么就从根节点[1,n]开始调用update函数进行操作,如果刚好执行到一个子节点,

hdu1394(线段树点更新的应用)

题意:求一个序列经过一定的操作得到的序列的最小逆序数 这题会用到逆序数的一个性质,在0到n-1这些数字组成的乱序排列,将第一个数字A移到最后一位,得到的逆序数为res-a+(n-a-1) 知道上面的知识点后,可以用暴力来解 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#in

hdu1689(线段树成段更新)

两种操作:1、set区间[a,b]上数字为v;2、查询[ 1 , n ]上的sum 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#include<queue>#include<set>#include<map>#include<stdio.h>#include<stdl

hdu 1754 I Hate It(线段树,单点更新,区间最值)

题意是求一个线段中的最大数。 线段树的模板题,试用了一下交大的模板。效率有点略低。 代码: #include <stdio.h>#include <string.h>#define TREE_SIZE (1 << (20))//const int TREE_SIZE = 200000 + 10;int max(int a, int b){return a > b ? a :

AI hospital 论文Idea

一、Benchmarking Large Language Models on Communicative Medical Coaching: A Dataset and a Novel System论文地址含代码 大多数现有模型和工具主要迎合以患者为中心的服务。这项工作深入探讨了LLMs在提高医疗专业人员的沟通能力。目标是构建一个模拟实践环境,人类医生(即医学学习者)可以在其中与患者代理进行医学

AI行业应用(不定期更新)

ChatPDF 可以让你上传一个 PDF 文件,然后针对这个 PDF 进行小结和提问。你可以把各种各样你要研究的分析报告交给它,快速获取到想要知道的信息。https://www.chatpdf.com/

【学习笔记】 陈强-机器学习-Python-Ch15 人工神经网络(1)sklearn

系列文章目录 监督学习:参数方法 【学习笔记】 陈强-机器学习-Python-Ch4 线性回归 【学习笔记】 陈强-机器学习-Python-Ch5 逻辑回归 【课后题练习】 陈强-机器学习-Python-Ch5 逻辑回归(SAheart.csv) 【学习笔记】 陈强-机器学习-Python-Ch6 多项逻辑回归 【学习笔记 及 课后题练习】 陈强-机器学习-Python-Ch7 判别分析 【学

系统架构师考试学习笔记第三篇——架构设计高级知识(20)通信系统架构设计理论与实践

本章知识考点:         第20课时主要学习通信系统架构设计的理论和工作中的实践。根据新版考试大纲,本课时知识点会涉及案例分析题(25分),而在历年考试中,案例题对该部分内容的考查并不多,虽在综合知识选择题目中经常考查,但分值也不高。本课时内容侧重于对知识点的记忆和理解,按照以往的出题规律,通信系统架构设计基础知识点多来源于教材内的基础网络设备、网络架构和教材外最新时事热点技术。本课时知识

GIS图形库更新2024.8.4-9.9

更多精彩内容请访问 dt.sim3d.cn ,关注公众号【sky的数孪技术】,技术交流、源码下载请添加微信:digital_twin123 Cesium 本期发布了1.121 版本。重大新闻,Cesium被Bentley收购。 ✨ 功能和改进 默认启用 MSAA,采样 4 次。若要关闭 MSAA,则可以设置scene.msaaSamples = 1。但是通过比较,发现并没有多大改善。