Dlib库landmark算法解析
来源:互联网 发布:pkm2软件 编辑:程序博客网 时间:2024/06/11 23:31
landmark是一种人脸部特征点提取的技术,Dlib库中为人脸68点标记,在《调用Dlib库进行人脸关键点标记》一文中有效果和标定点序号的示意图。今后可采用landmark中的点提取眼睛区域、嘴巴区域用于疲劳检测,提取鼻子等部分可用于3D姿态估计。
Dlib库使用《One Millisecond Face Alignment with an Ensemble of Regression Trees》CVPR2014中提及的算法:ERT(ensemble of regression trees)级联回归,即基于梯度提高学习的回归树方法。该算法使用级联回归因子,首先需要使用一系列标定好的人脸图片作为训练集,然后会生成一个模型。
the shape_predictor_trainer object to train a shape_predictor using a set of training images, each annotated with shapes you want to predict. To do this, the shape_predictor_trainer uses the state-of-the-art method.
使用基于特征选择的相关性方法把目标输出ri投影到一个随机方向w上,并且选择一对特征(u,v),使得Ii(u’)-Ii(v’)与被投影的目标wTri在训练数据上拥有最高的样本相关性。
当获得一张图片后,算法会生成一个initial shape就是首先估计一个大致的特征点位置,然后采用gradient boosting算法减小initial shape 和 ground truth 的平方误差总和。用最小二乘法来最小化误差,得到每一级的级联回归因子。核心公式如下图所示:
我们使用梯度提高学习的回归树训练每个rt,使用最小二乘法最小化误差。t表示级联序号,rt(∙,∙)表示当前级的回归器regressor。回归器的输入参数为图像I和上一级回归器更新后的shape,采用的特征可以是灰度值或者其它。每个回归器由很多棵树(tree)组成,每棵树参数是根据current shape和ground truth的坐标差和随机挑选的像素对训练得到的。
与LBF不同,ERT是在学习Tree的过程中,直接将shape的更新值ΔS存入叶子结点leaf node.初始位置S在通过所有学习到的Tree后,meanshape加上所有经过的叶子结点的ΔS,即可得到最终的人脸关键点位置。总体流程如下图所示:
附:人脸特征提取算法比较(ASM、CLM、ERT等 )请参考如下博客:
http://blog.csdn.net/u013803245/article/details/51263808
- Dlib库landmark算法解析
- Dlib库landmark算法解析(ERT 集成回归树)
- Learnning Dlib(五) Dlib face landmark detection
- 【Dlib+Python+Ubuntu】人脸landmark
- Dlib C++ 算法库
- Dlib库中实现正脸人脸关键点(landmark)检测的测试代码
- Learnning Dlib(六) Speeding up Dlib’s Facial Landmark Detector
- 利用dlib库(Python)实现实时(摄像头)人脸检测以及特征点标定(landmark))
- C++ Dlib Landmark 人脸关键点检测
- dlib库中svm 例程解析
- C++机器学习算法库Dlib
- dlib库使用
- 如何使用dlib库
- vs2013配置dlib库
- dlib库学习之一
- 树莓派搭建Dlib库
- xcode使用dlib库
- dlib安装 无法解析的外部命令
- Spring Cloud(六):链路追踪Sleuth与Zipkin结合
- U3D 遇到的 object reference not set to an insance 原因及解决方法
- java 代理ip
- KafkaOffsetMonitor
- 【剑指Offer】最小的k个数
- Dlib库landmark算法解析
- 福利来啦!Apsara Clouder大数据专项技能认证:使用Quick BI 制作企业数据分析报表
- 3招解决信用不良问题
- Android 自定义标尺控件(选择身高、体重等)
- HSSFWorkbook生成Excel表格
- 内存管理--栈
- STM32的3种低功耗模式
- NI.Circuit.Design.Suite.Pro.v11.0 1CD(NI电路设计套件 电路图捕捉, SPICE仿真和PCB布局
- 微信JS-SDK 接口