在一份新的研究报告中,谷歌详细介绍了今年I/O大会上令人印象深刻的Project Starline演示的背后技术。Project Starline本质上是一个3D视频聊天室,旨在提供真人面对面体验来取代一对一的2D视频电话会议。
Google这篇研究论文强调了欺骗用户大脑,使其认为有一个真正的人坐在离用户几英尺远的地方,这其中有不少挑战。显然,图像需要高分辨率,没有干扰性的伪影,但它也需要从用户的相对位置看起来正确。音频是另一个挑战,因为系统需要让用户听起来像是从面对面真人嘴里说出的话。然后还有一个小问题,那就是眼睛的接触。
但是,Project Starline希望最终可以提供类似于虚拟或增强现实的存在感,而用户不需要佩戴笨重的头盔或追踪器。该报告详细说明了究竟需要多少硬件才能开始解决这些问题。该报告显示,该系统是围绕着一个大型的65英寸8K面板建立,该面板以60Hz运行。围绕着它,Google的工程师们安排了三个"捕获舱",能够捕获彩色图像和深度数据。该系统还包括四个额外的跟踪摄像机,四个麦克风,两个扬声器和红外投影仪。总的来说,从四个视点采集彩色图像,以及三个深度图,总共有七个视频流。音频采集频率为44.1kHz,编码速度为256Kbps。
大型站长资讯类网站! https://www.0857zz.com