模板匹配_从图片到视频流
来源:互联网 发布:正规的网络兼职赚钱 编辑:程序博客网 时间:2024/06/06 09:16
还是先上我的程序吧,实现了对视频流的匹配,在视频中标出目标物体的位置并计算出物体所在的中心坐标:
#include <opencv2/core/core.hpp> #include <opencv2/highgui/highgui.hpp> #include <opencv2\opencv.hpp> #include<opencv2\imgproc\imgproc.hpp> #include <iostream> #include<string> #include <sstream> using namespace cv; using namespace std; int main() { ///调用摄像头VideoCapture cap(0); if(!cap.isOpened()) { return -1; } Mat src; Mat templ; Mat result;int match_method=0;templ=imread("img.jpg",1);bool stop = false; ///循环处理图像while(!stop) { cap>>src; /// 创建输出结果的矩阵int result_cols = src.cols - templ.cols + 1;int result_rows = src.rows - templ.rows + 1;result.create( result_cols, result_rows, CV_32FC1 );matchTemplate( src, templ, result, match_method );normalize( result, result, 0, 1, NORM_MINMAX, -1, Mat() );/// 通过函数 minMaxLoc 定位最匹配的位置double minVal; double maxVal; Point minLoc; Point maxLoc;Point matchLoc;minMaxLoc( result, &minVal, &maxVal, &minLoc, &maxLoc, Mat() );/// 对于方法 SQDIFF 和 SQDIFF_NORMED, 越小的数值代表更高的匹配结果. 而对于其他方法, 数值越大匹配越好if( match_method == CV_TM_SQDIFF || match_method == CV_TM_SQDIFF_NORMED ){ matchLoc = minLoc; }else{ matchLoc = maxLoc; }/// 最终结果rectangle( src, matchLoc, Point( matchLoc.x + templ.cols , matchLoc.y + templ.rows ), Scalar::all(0), 2, 8, 0 );rectangle( result, matchLoc, Point( matchLoc.x + templ.cols , matchLoc.y + templ.rows ), Scalar::all(0), 2, 8, 0 );cout<<"目标的中心坐标 ( "<<matchLoc.x + templ.cols/2<<" , ("<<matchLoc.y + templ.rows<<" )"<<endl;imshow("当前视频",src); if(waitKey(30) >=0) stop = true; } return 0; }
关于模板匹配的原理:
http://www.opencv.org.cn/opencvdoc/2.3.2/html/doc/tutorials/imgproc/histograms/template_matching/template_matching.html#template-matching
模板匹配
目标
- 使用OpenCV函数 matchTemplate 在模板块和输入图像之间寻找匹配,获得匹配结果图像
- 使用OpenCV函数 minMaxLoc 在给定的矩阵中寻找最大和最小值(包括它们的位置).
原理
什么是模板匹配?
它是怎么实现的?
我们需要2幅图像:
- 原图像 (I): 在这幅图像里,我们希望找到一块和模板匹配的区域
- 模板 (T): 将和原图像比照的图像块
我们的目标是检测最匹配的区域:
为了确定匹配区域, 我们不得不滑动模板图像和原图像进行 比较 :
通过 滑动, 我们的意思是图像块一次移动一个像素 (从左往右,从上往下). 在每一个位置, 都进行一次度量计算来表明它是 “好” 或 “坏” 地与那个位置匹配 (或者说块图像和原图像的特定区域有多么相似).
对于 T 覆盖在 I 上的每个位置,你把度量值 保存 到 结果图像矩阵 (R) 中. 在 R 中的每个位置 都包含匹配度量值:
上图就是 TM_CCORR_NORMED 方法处理后的结果图像 R . 最白的位置代表最高的匹配. 正如您所见, 红色椭圆框住的位置很可能是结果图像矩阵中的最大数值, 所以这个区域 (以这个点为顶点,长宽和模板图像一样大小的矩阵) 被认为是匹配的.
实际上, 我们使用函数 minMaxLoc 来定位在矩阵 R 中的最大值点 (或者最小值, 根据函数输入的匹配参数) .
OpenCV中支持哪些匹配算法?
问得好. OpenCV通过函数 matchTemplate 实现了模板匹配算法. 可用的方法有6个:
- 平方差匹配 method=CV_TM_SQDIFF
这类方法利用平方差来进行匹配,最好匹配为0.匹配越差,匹配值越大.
标准平方差匹配 method=CV_TM_SQDIFF_NORMED
相关匹配 method=CV_TM_CCORR
这类方法采用模板和图像间的乘法操作,所以较大的数表示匹配程度较高,0标识最坏的匹配效果.
标准相关匹配 method=CV_TM_CCORR_NORMED
相关匹配 method=CV_TM_CCOEFF
这类方法将模版对其均值的相对值与图像对其均值的相关值进行匹配,1表示完美匹配,-1表示糟糕的匹配,0表示没有任何相关性(随机序列).
在这里
标准相关匹配 method=CV_TM_CCOEFF_NORMED
通常,随着从简单的测量(平方差)到更复杂的测量(相关系数),我们可获得越来越准确的匹配(同时也意味着越来越大的计算代价). 最好的办法是对所有这些设置多做一些测试实验,以便为自己的应用选择同时兼顾速度和精度的最佳方案.
代码
在这程序实现了什么?
- 载入一幅输入图像和一幅模板图像块 (template)
- 通过使用函数 matchTemplate 实现之前所述的6种匹配方法的任一个. 用户可以通过滑动条选取任何一种方法.
- 归一化匹配后的输出结果
- 定位最匹配的区域
- 用矩形标注最匹配的区域
下载代码: 单击 这里
看一下代码:
代码说明
定义一些全局变量, 例如原图像(img), 模板图像(templ) 和结果图像(result) , 还有匹配方法以及窗口名称:
载入原图像和匹配块:
创建窗口,显示原图像和结果图像:
创建滑动条并输入将被使用的匹配方法. 一旦滑动条发生改变,回调函数 MatchingMethod 就会被调用.
一直等待,直到用户退出这个程序.
让我们先看看回调函数. 首先, 它对原图像进行了一份复制:
然后, 它创建了一幅用来存放匹配结果的输出图像矩阵. 仔细看看输出矩阵的大小(它包含了所有可能的匹配位置)
执行模板匹配操作:
很自然地,参数是输入图像 I, 模板图像 T, 结果图像 R 还有匹配方法 (通过滑动条给出)
我们对结果进行归一化:
通过使用函数 minMaxLoc ,我们确定结果矩阵 R 的最大值和最小值的位置.
函数中的参数有:
- result: 匹配结果矩阵
- &minVal 和 &maxVal: 在矩阵 result 中存储的最小值和最大值
- &minLoc 和 &maxLoc: 在结果矩阵中最小值和最大值的坐标.
- Mat(): 可选的掩模
对于前二种方法 ( CV_SQDIFF 和 CV_SQDIFF_NORMED ) 最低的数值标识最好的匹配. 对于其他的, 越大的数值代表越好的匹配. 所以, 我们在 matchLoc 中存放相符的变量值:
显示原图像和结果图像. 再用矩形框标注最符合的区域:
结果
开始测试我们的程序,一幅输入图像:
还有一幅模版图像:
产生了一下结果图像矩阵 (第一行是标准的方法 SQDIFF, CCORR 和 CCOEFF, 第二行是相同的方法在进行标准化后的图像). 在第1列, 最黑的部分代表最好的匹配, 对于其它2列, 越白的区域代表越好的匹配.
正确的匹配在下面显示 (右侧被矩形标注的人脸). 需要注意的是方法 CCORR 和 CCOEFF 给出了错误的匹配结果, 但是它们的归一化版本给出了正确的结果, 这或许是由于我们实际上仅仅考虑 “最匹配” 而没考虑其他可能的高匹配位置.
- 模板匹配_从图片到视频流
- 基于直方图的匹配_视频流
- 视频像素数据_从摄像头到驱动
- Javase实战教学视频_从入门到精通_动力节点课堂实录
- 人员分配[模板_最大匹配]
- 从视频中保存图片
- 从视频中抓拍图片
- 从大学生到程序员视频
- 视频到图片序列,图片序列到视频(代码)
- Java实现文本、图片、视频的拷贝(从一个地方拷贝到另一个地方)
- 模板,从服务端到客户端
- 从模板模式到JdbcTemplate
- 利用FFmpge进行视频压缩(从图像到H264视频流)
- [Android]从视频流读取帧图像保存到本地
- ffmpeg从网上保存视频流到本地文件
- 模板_网络流
- 二分匹配 从陌生到认知
- 字符串匹配:从后缀自动机到KMP
- 调试远程推送
- 简单的触发器和存储过程
- Maven系列--pom.xml 配置详解
- linux 下 git 初尝试
- 使用JS获取当前地理位置方法汇总
- 模板匹配_从图片到视频流
- c++中的继承
- 102 地理编码和反编码
- Qt数据库 QSqlQueryModel实例操作
- iOS——NSMutableAttributedString 实现富文本
- 机器学习 RANSAC算法思想简述
- SQL Server 2005 大数据量数据存储设计思路分享
- 会话管理(cookie)(一)
- 【Android学习之道】 四大组件之ContentProvider内容提供器