Ogre利用OpenCV实现视频纹理

原文写于2011年

http://blog.csdn.net/zhuxiaoyang2000/article/details/6758407

由于Ogre自身没有实现视频纹理，我们需要自己想办法读取视频并显示到某个物体上。网上已有人通过TheoraVideoPlugin实现视频播放，但需要编译libogg等几个第三方库，其自身带的Demo也不完善，不便于利用。由于最近在搞OpenCV，就想到是不是可以通过OpenCV来读取视频，并将每帧图片转化为Ogre可读的Buffer，然后将其显示到实体上。Google之后发现，已经有人有类似的想法，但给出的答案没有处理好图片的RGB问题，总是报错。经过几个小时的修改，我已经成功实现了Ogre的视频纹理。
（1）首先当然要有OpenCV库（include文件、lib文件、dll文件），可以自己编译或下载已经编译好的版本。我采用的是OpenCV 2.0。

需要的lib文件是cv200.lib，cxcore200.lib和highgui200.lib（根据OpenCV的版本不同，文件的名称也会不同）及相应的dll文件。

（2）读取视频文件

[cpp] view plaincopy

1. IplImage*  mVideoFrame;  
2. CvCapture* mVideoCapture;  
3. mVideoCapture = cvCreateFileCapture("..\\media\\xxx.avi");  

（3）创建视频帧的图片及其相应的材质文件

这里要特别注意的就是OpenCV的IplImage的图片数据中RGB的存储顺序，它默认的存储顺序是BGR。故在设置TexturePtr时我们也应该注意其图片格式，否则会出现各种诡异的错误。这里我们添加了A通道，图片格式为PF_B8G8R8A8。

[cpp] view plaincopy

1. void createVideoTexture()  
2. {  
3.     mVideoFrame = cvQueryFrame(mVideoCapture);  
4.     if(!mVideoFrame)  
5.     {  
6.         return;  
7.     }  
8.       
9.     // Implementing a video texture  
10.     Ogre::TexturePtr texture = Ogre::TextureManager::getSingleton().createManual(  
11.         "VideoTexture",      // name  
12.         Ogre::ResourceGroupManager::DEFAULT_RESOURCE_GROUP_NAME,  
13.         Ogre::TEX_TYPE_2D,   // type  
14.         mVideoFrame->width,  // width  
15.         mVideoFrame->height, // height  
16.         0,                   // number of mipmaps  
17.         Ogre::PF_B8G8R8A8,   // pixel format  
18.         Ogre::TU_DYNAMIC_WRITE_ONLY_DISCARDABLE // usage, for textures updated very often  
19.         );  
20.     // Get the pixel buffer  
21.     Ogre::HardwarePixelBufferSharedPtr pixelBuffer = texture->getBuffer();  
22.     // Lock the pixel buffer and get a pixel box  
23.     unsigned char* buffer = static_cast<unsigned char*>(  
24.         pixelBuffer->lock(0, mVideoFrame->width*mVideoFrame->height*4, Ogre::HardwareBuffer::HBL_DISCARD) );  
25.     for(int y = 0; y < mVideoFrame->height; ++y)  
26.     {  
27.         for(int x = 0; x < mVideoFrame->width; ++x)  
28.         {  
29.             buffer[ ((y*mVideoFrame->width)+x)*4 + 0 ] = mVideoFrame->imageData[ ((y*mVideoFrame->width)+x)*3 + 0 ]; // B  
30.             buffer[ ((y*mVideoFrame->width)+x)*4 + 1 ] = mVideoFrame->imageData[ ((y*mVideoFrame->width)+x)*3 + 1 ]; // G  
31.             buffer[ ((y*mVideoFrame->width)+x)*4 + 2 ] = mVideoFrame->imageData[ ((y*mVideoFrame->width)+x)*3 + 2 ]; // R  
32.             buffer[ ((y*mVideoFrame->width)+x)*4 + 3 ] = 255;                                                        // A  
33.         }  
34.     }  
35.     // Unlock the pixel buffer  
36.     pixelBuffer->unlock();  
37.   
38.     // Create a materail using the texture  
39.     Ogre::MaterialPtr material = Ogre::MaterialManager::getSingleton().create(  
40.         "VideoTextureMaterial", // name  
41.         Ogre::ResourceGroupManager::DEFAULT_RESOURCE_GROUP_NAME);  
42.     material->getTechnique(0)->getPass(0)->createTextureUnitState("VideoTexture");  
43.     material->getTechnique(0)->getPass(0)->setDepthCheckEnabled(false);  
44.     material->getTechnique(0)->getPass(0)->setDepthWriteEnabled(false);  
45.     material->getTechnique(0)->getPass(0)->setLightingEnabled(false);  
46. }  

（4）创建一个长方形实体来展示视频纹理

[cpp] view plaincopy

1. Ogre::Rectangle2D* mVideoScreen = new Ogre::Rectangle2D(true);  
2. mVideoScreen->setCorners(-0.5f, 1.0f, 0.5f, -1.0f);  
3. mVideoScreen->setBoundingBox(Ogre::AxisAlignedBox(-100000.0f * Ogre::Vector3::UNIT_SCALE, 100000.0f * Ogre::Vector3::UNIT_SCALE));  
4. mVideoScreen->setMaterial( material->getName() );  
5. // Attach it to a SceneNode  
6. Ogre::SceneNode* videoScreenNode = mSceneMgr->getRootSceneNode()->createChildSceneNode("VideoScreenNode");  
7. videoScreenNode->attachObject(mVideoScreen);  

（5）每帧更新视频
方法和（3）差不多，这里就不赘述了。

实现效果如下：

源代码可在http://download.csdn.net/detail/zhuxiaoyang2000/3582906找到。