酷技术：SamSung Project Beyond，实时3D全景

本文原载于我的主页：planckscale.info，转载于此。

最近几个月各种实时全景拼接技术雨后春笋般冒了出来，看来一项技术到了瓜熟蒂落的时候，是挡也挡不住。今早无聊搜了下实时全景，还是把不关注技术新闻又懒于做技术推广的老夫吓了一跳。

目前市面上大多数产品跟我们类似，无非是给拼接算法一个高性能实现，或者基于FPGA，或者基于CUDA。真正让人眼睛一亮的是三星最近推出的Project Beyond，这款产品配合一个三星的虚拟现实眼镜Gear VR，可以实现真正的身临其境感——对于我们关注技术的人来说，3D，这个词儿是唯一的重点。

图1.  三星Project Beyond

我们知道人类之所以能感知纵深，是因为双眼上像点与场景点构成一个三角，数学上我们可以用三角测量来计算纵深，因此我们双眼感知到的信息里是包含纵深的。3D眼镜正是利用该原理，给双眼不同的图像，利用这个差异产生纵深感。

从目前的报道里，我们可以看出Project Beyond是一个赋予双目纵深感的全景装置，这一点是它超出以往技术的关键。

图2.  Project Beyond的构造

如图1，Project Beyond有17个广角相机，其中1个指向天空。它采取了与普通全景相机共中心摆位不一样的摆位方式，这自然是因为要产生3D效果的要求——普通的共中心摆位无法感知到纵深信息，这可以参考我们的《全景拼接算法原理》系列文章。

 

我们也一直有把自己的实时全景技术做成微型硬件设备的想法，可惜各方面因素制约（尤其销售是我们的弱项）尚未实施。现在看起来有些可惜。

我们认为计算机视觉在接下来几年会有狂飙突进的发展——各方面条件都已成熟了，无论是理论还是硬件计算能力。而新型的人机交互手段可能是这其中最重要的一个领域，在PC迅猛发展的这二三十年里，鼠标键盘始终巍然不动，现在是时候改变了。Project Beyond这样的产品只是个开始，各种新的体验正扑面而来。