video4linux sink详解 ximagesink与xvimagesink和v4lsink的区别

V4L在嵌入式设备上应用广泛，他对硬件进行加速，而不经过X的管理，提高系统的性能。

 

1、Video4Linux介绍

       Video4Linux从1997年开始引进，它基于一个统一的接口，并用于视频的获取驱动。因此它通常被认为是一个视频获取的框架，通常应用于照相机、电视调谐器、甚至是收音机。

       主要针对片上芯片的多媒体设计。

 

2、Video4Linux应用于输出设备

      映射视频处理设备。

      多通道的视频流处理硬件。

      控制视频输出硬件，硬件特性允许Framebuffer覆盖视频流之上，Framebuffer和视频硬件紧密结合。

      控制像素格式和大小，色度，亮度，Alpha混合的控制。

 

3、Video4Linux的支持

（1）Gstreamer

         产生一个direct V4L Video Output Overlay sink。

         可以利用硬件进行颜色转换并直接显示，视频加速显示到设备上，不支持X11。

         封装的Gstreamer插件允许以下操作：

a、全局Alpha控制

b、色度调节

c、图像翻转

d、图像旋转

 

（2）Xv

         Xv支持硬件加速进行颜色转换，可以基于UI的X11。

 

（3）DirectFB

         在DirectFB的框架中也支持V4L的Output Overlay。

          支持OSD（On Screen Display）和硬件混合的达芬奇驱动。

 

（4）Android

          由于Android的图形输出采用了直接操作Framebuffer的方式，因此其实现的SurfaceFlinger支持硬件加速。包括如下功能：

a、Overlays

b、图像旋转

c、图像翻转

d、硬件混合

 

其中比较著名的SoC芯片要属TI的OMAP和Freescale的i.MX

 

ximagesink与xvimagesink和v4lsink的区别

首先介绍一下Gstreamer支持的几种video sink，

1. v4lsink, v4l2sink：video for linux的输出
2. ximagesink：使用XWindow输出，基本都支持
3. xvimagesink：使用XVideo extension输出，在ubuntu下要装一大堆库才支持
4. sdlvideosink：使用sdl库输出，需要装sdl库
5. dfbvideosink：用DirectFB库输出，需要apt-get install directfb* 安装后才能使用
6. cacasink：使用的是libcaca库，是在控制台下用字符加颜色的方式显示图像的，与win32下的 SetConsoleTextAttribute 函数效果差不多，支持X11, S-Lang，ncurses和raw等几种方式输出用ncurse的方式：CACA_DRIVER=ncurses gst-launch filesrc location=test.avi ! decodebin ! ffmpegcolorspace ! cacasink
7. fpsdisplaysink：能在控制台上打印出当前的和平均的framerate
8. aasink：用ascii字符的形式在控制台输出图像，与cacasink类似，但是不支持颜色

 

xvimagesink和v4lsink以及v4l2sink对视频输出的colorbalance做了处理，实现了Color Balance的接口，因此在利用上述视频输出插件时不需要做colorspace和videoscale的操作。比如：

gst-launch filesrc location=xxx ! mpegdemux name=dmx dmx.video_00 ! queue ! mpeg2dec ! xvimagesink

 

反之，ximagesink必须要进行colorspace和videoscale的操作，才能正常输出。比如：

gst-launch filesrc location=xxx ! mpegdemux name=dmx dmx.video_00 ! queue ! mpeg2dec ! ffmpegcolorspace ! videoscale ! ximagesink