3D直播的技术基石--实时网格生成技术（上篇）

引言

现今的“3D直播”一般指的是在VR中直播360度全景视频，不能算真正的3D直播，其原理是多个2D镜头多角度拍摄后拼接出来的全景图片，在VR空间中渲染出一个圆球型，然后把全景图片贴到圆面上去，所以全景视频缺失了深度信息，本质上还是记录单一的平面图像，如上图。

全景视频是VR产业发展过程中的一个过渡阶段，它是现有技术的瓶颈和成本的妥协结果，技术上，真正的3D直播还存在一些瓶颈和不足，成本也很昂贵。那带有深度信息的3D直播，或者说，3D视频技术的未来会是什么样的呢？作为3D感知领域的开拓者，MantisVision的解决方案是什么呢？且听笔者一一道来。

3D信息的两种展示形式

通常的3D信息有两种展示形态：点云（Point Cloud）和网格（Mesh）。点云中一般包含了三种信息：顶点（Vertex），颜色（Color）和法向量（Normal），简单来说就是空间中存在的一些点，顶点表示其在空间中的位置，法向量表示其朝向。网格相比较点云，一般会多了两个维度的信息：面片索引（Face index）和贴图坐标（Texture Coord），面片索引用是用来表述哪几个点连起来是一个面，贴图坐标是帮助渲染器在原始贴图中寻找对应的位置关系。