3D技术如何提供沉浸式在线参观体验

2021.10.12

沉浸式媒体技术作为新兴多媒体技术,将数码体验推进新境界。由于此技术可以数字化重现三维世界,提供不同于传统媒体的全新数字体验,故此得到业界广泛关注。然而,创建沉浸式内容需要使用复杂的软件和高昂的设备,导致这一技术迟迟无法得到广泛的应用。不过最近,腾讯基于居家办公需求而启动的新项目,或许可以带来突破。

今年6月,腾讯于美国洛杉矶开设了新的办公楼,然而受疫情影响,新的办公楼无法向员工开放,腾讯多媒体实验室沉浸式媒体专家,通过其自研技术实现了完整大楼的三维数据重建,从而使腾讯员工通过三维渲染展示链,就可以沉浸式参观体验新的办公楼。

这次线上参观体验是基于腾讯自研的3D点云技术构建的,该技术适配低价、通用的商业相机进行拍摄,然后通过3D点云重建服务,对静态图像进行分析处理,实现二维到三维的数字化重建,为使用者提供身临其境的沉浸式体验,并让人可以随时线上参观这个办公新址。

腾讯多媒体实验室负责人刘杉博士表示:“我们认为这是一个很好的例子,说明沉浸式媒体在未来大有可为。沉浸式媒体能够让观众产生身临其境的体验感,在探索新空间时仿佛置身其中。”

市面上大多3D数据的采集仍然需要借助激光、结构光等特殊硬件采集设备。然而,通过多媒体实验室自研的点云技术,即使使用在任何电子商店都能买到的普通全景相机,仍可通过自研软件进行分析,以创建三维空间模型。传统方法中构建一个5000平方英尺(约465平方米)的3D模型需要整个专业团队的参与,而使用腾讯的这项新技术则只需一人,并在24小时内就能捕捉到相同的信息。

这项技术不仅仅是把图片混合在一起,而是以真正的3D形式呈现整个建筑。为方便用户使用,腾讯沉浸式媒体团队还开发了iOS应用,提供一站式拍摄、分享服务,为用户带来更便捷的体验。整个过程可以自动完成,在云端使用新的3D技术处理图像后,将自动生成一个可共享的高分辨率3D模型链接,便于最终用户体验。

腾讯多媒体实验室提供的3D Tour解决方案是基于真实空间的数字化重现,因此不同于简单的二维图像切换,用户可以体验到“漫步”于建筑的感觉。刘杉博士表示这一步极为关键,因为它有助于让沉浸式体验惠及普通用户,进而催生更多的实际需求。这项技术将带来无限可能,例如帮助房地产经纪人提供沉浸式看房体验,或帮助博物馆以更引人注目、更有影响力的方式展示艺术作品。

腾讯一直在积极参与沉浸式媒体共同标准的制定,预计沉浸式媒体的应用将在未来十年迅速增长。现在看来,办公新址沉浸式参观体验是一个良好的开始,它象征着新的技术时代即将到来。