移动 VR 究竟有多少坑？高通、ARM、谷歌、Unity Technologies 的专家们这么看 | SIGGRAPH 2017 圆桌对话精选

*SIGGRAPH 2017 VR Village 展厅一角

雷锋网导读：7 月 31日，计算机图形社区迎来了一年中最重要的日子：一年一度的盛会 SIGGRAPH 在洛杉矶会议中心正式开幕。作为计算机图形领域的顶级会议，SIGGRAPH 2017不仅吸引了世界各地的学者；各类 VR、AR 初创企业，英特尔、英伟达、AMD 等计算机硬件设计商，以及迪士尼、索尼影业、动视暴雪等传统影视游戏制作发行商也云集于此。

移动 VR 大趋势

作为一届以 VR/AR 技术为主题的大会，SIGGRAPH 2017 主展厅的 VR/AR 应用体验，再次吸引了摩肩接踵的人群。但对于 VR/AR 这样一个仍在摸着石头过河的行业，对于这样一次呈现技术趋势的大会，雷锋网更关心的是：从业公司对于当下的判断以及对将来的思考。

今日距 SIGGRAPH 2017 开幕已有三天。在这三天的所有讲座与对话中，雷锋网(公众号：雷锋网)参会记者挑选了最能反映上述两点的一场圆桌谈话——来自高通、ARM、Unity Technologies、谷歌白日梦以及一家英国内容商的五位专家，对手机 VR 面临的关键问题进行观点分享与交流。雷锋网将对话的主要部分整理出来，呈献给大家。

主题与嘉宾

• 圆桌对话：《The Future of Mobile VR Graphics and Gaming》，即《移动端 VR 图像和游戏的未来》

主持人：Ryan Shrout，知名媒体人，移动设备、GPU、PC 行业分析师，Youtube “PC Perspective”频道主播。

对话嘉宾：

• Tom Olson

  ARM  GPU 架构团队主管，Vulkan 事业群、The Khronos 事业群负责人

• Scott Flynn

  Unity Technologies VR/AR 技术研发主管

• Adam Gousetis

  谷歌白日梦工程师，负责图形 SDK 研发

• Nizar Romdan

  Virtual Arts 联合创始人兼 CEO，这是一家位于剑桥的 XR（AR、VR、MR）内容制作初创公司 

• Micah Knapp

  高通 GPU 研发负责人

对话内容

Ryan Shrout（以下称主持人）：我们会聊聊未来的移动 VR 图像和游戏。在座各位对 VR 的发展趋势有不同的看法：我们现在处在一个什么样的 VR 发展阶段？未来十年、三十年的前景又是怎样的？

Micah Knapp：VR 的发展和手机发展阶段堪称对应——在功能手机时代，手机电池续航短、没有上网数据，只是个移动电话，看起来像一块砖。智能手机对其进行了外观、续航的改进，加入数据流量，成为今天十分普及的个人计算设备。

但这花了三十年的时间。

XR 会跟随这个趋势。今天的 VR 还相当于砖头机时代——现在的头显设备，是非常粗糙的技术实现方式。将来会变得更好。

主持人：你认为 VR、AR 技术成熟的时间窗口也是三十年吗？有没有办法加速？所以我不需要等到 70 岁才能获得好的体验。

Micah Knapp：绝对比手机快，或许 10 年就够。10 年之后，我们也不会再把它们叫做 VR、XR，只是计算。

Adam Gousetis：VR 发展的优势是：它并不是只有移动平台。在不同硬件平台包括 PC 端，都在同时起步。

主持人：这引出了我的下一个问题：移动 VR 的优势是什么？相对 PC 和主机，它要做许多妥协。

Tom Olson：妥协这个词，远远不足以概括移动 VR 面临的挑战。30 年前，手机从功能手机起步，变成了今天的样子。换句话说，我们并不知道将来的 VR/AR 会变成什么样子。我认为，和手机一样，移动特性将会彻底改变很多东西。如同 Micah 说得，它是一个计算机，但使用方式将会彻底不同。随身携带将会打开各种可能，而与计算机连接的 VR/AR 很可能会成为一个完全独立的品类。

主持人：从内容角度，哪些东西我们在移动 VR 上可以做，而无法在 PC 上实现？

Nizar Romdan：作为内容开发商，我们选择只面向移动 VR。这个决策背后的逻辑是：移动 VR 的市场门槛比 PC 低得多，消费者不需要买一台 PC，有智能手机和 cardboard 就够了。从内容角度来讲，开发商并不需要一下子做出 AAA 或者占领大众市场的产品；可以先从小游戏着手，一步步摸索能够流行的大众 VR 内容到底是什么。

Micah Knapp：这很有道理。移动 VR 最吸引人的一点是没有接线。接线是一条死胡同，是实现沉浸体验最大的阻碍：一台 PC，一台头显，你的活动受到它们之间连接线的限制。相比怎么去除线缆，我认为最佳解决方案应该是一开始就不要接线。最终，用接线连接的 VR 设备样式将会遇冷。

Adam Gousetis：对于白日梦以及与我们紧密合作的 Tango 团队而言，移动 VR 至少有这样的可能性：戴着它，在城市的各个角落能自由地使用 VR/AR。如果用户需要带着 PC，是否还能实现这样的体验 ？

Scott Flynn：我认为移动 VR 的一大特点是技术更新更快。移动芯片组更新换代很快，有很大的空间设计专用芯片。PC 和主机怎么赶上这样的硬件更新速度？

Tom Olson: 我完全同意 Scott 的观点。用户不会每年换一台 PC，而对于智能手机，我也不会每年换一台（笑），但很多人这么干。我认为，行业痛点在于拓展市场规模，让内容制作商能把产品尽可能传播到更多的人群，覆盖开发成本并支付开发人员的工资。

主持人：大家对于 VR 游戏的前景怎么看？对于它是否能最终取代主机游戏、甚至是 PC 游戏，一直存在许多疑问。你们认为 VR 游戏是否出于这一轨迹上，或者，它将会和主机游戏、PC 游戏长期共存？

Scott Flynn：这是一个更大的问题，主机游戏应该还会存在十年。停滞的硬件是主机的一大优势。开发者可以有针对性地不断优化。我认为市场正在离开主机行业，原因很简单：游戏市场需要不断进化才能达到我们的预期，不会留在一个稳定、发展缓慢的平台上。

Adam Gousetis：个人的观点是，它们会像主机与 PC 游戏那样共存下去。我喜欢太空模拟游戏，这是一个很小的市场。某种程度上，VR 应该凭借优秀的体验占领这块市场。同时整个电子游戏市场也会不断增长。另外，VR 的非游戏应用也让我很惊喜，很难猜测何种 VR 娱乐方式将会是最成功的。

Micah Knapp：移动手机端的消费和娱乐，很大程度上由视频驱动，包括运动、音乐会，这降低了获取不同体验的门槛。这一点上移动 VR 会超过主机：它能够一直开机，随时使用，不需要在家。

主持人：大家谁会为市场的碎片化担心？不同的硬件、系统、工具设置，让把 VR 推向主流市场变得困难重重。

Scott Flynn：大部分开发者会使用游戏引擎。理想的情况下，游戏引擎能解决这类问题中的很大一部分。对开发者而言，兼容不同硬件系统的成本有时候会非常高，我希望游戏引擎能解决这个问题。另外，如果你开发自己的游戏引擎，会有好几年的开发成本。

Tom Olson：如果把 VR 锁进主机行业的情况（平台高度集中）——比方说，假设今天的 VR 硬件产品有十年的生命周期，这简直没法想象。VR 绝对还没到这个时候。

但我认为，将来会出现些相对稳定的、生命周期相对长的硬件产品——类似于主机，产品生命周期中的大部分时间，在规格上落后的。但对开发者来说，它们会是较稳定的平台选择，大家会不断对其优化。

如果没有颠覆性创新的话，行业也不会进步。我认为，为了让 VR 发展到我们所期望的程度，一定程度的碎片化是必然的。

Adam Gousetis：对于主机，大部分配的是标准化的手柄——双操纵杆再加上几个按键。但这仍然有定制的空间，比如不同按钮控制的是什么。VR 行业还没到这个程度，硬件之间的差异很大，我们仍需等着看哪种设计更好、更容易使用。

Micah Knapp：其实，我们看主机系统，也会经常说它是碎片化的：不同的系统和 API。我们会开发出一套基础设施，帮助开发者们越过各道障碍。这样的基础设施到位之后，会推动 XR 社区不断向前发展。目前并不是标准化硬件的时机——我们清楚许多问题，但不清楚所有的问题，也不清楚最佳解决方案，需要给予硬件团队、软件团队、开发者们考虑所有可能性的空间。

主持人：不管是硬件还是软件，有哪些技术难关需要攻克来让 VR 变成一个大众化的产品？在移动设备市场，我们会谈发热、性能、显示屏等等，这里面哪样最突出？

Adam Gousetis：我最关心的永远是发热。几乎在每个场景下，我们都需要为了控制发热和功耗做出妥协。GPU 可以带动多少像素？摄像头能用多久？你是否关心电池续航？这些关系到玩游戏一次能玩多久。随着我们不停制造更轻薄小巧的手机，发热问题变得更难解决，而不是更容易。平衡所有零部件是一个相当具有挑战性的工作。

主持人：一体式 VR 头显设备或许能解决某些上述问题？

Adam Gousetis：一体式设备最大的优势是有更大的散热空间。

Tom Olson：作为一个研究移动端 GPU 的人，我很无奈地清楚这一点：所有扎实、高端的功能，都受到发热的限制，这决定了它们能运行多快——你很容易就能掉一半的电量、或者一半的性能。另外，对于专用设备（如 VR），硬件的价格是解锁市场需求的关键。现在，我们有些很不错的内容，但不足以让消费者心甘情愿为 800 美元的头显掏腰包。因此在我看来，正确的做法是对消费者已有的设备（智能手机）添加功能，达到一个符合合理预期的效果，让内容制作商有一个市场，日后再做出杀手级的应用。这或许最终能让消费者接受设备的价格。我们现在处在一个筚路蓝缕的阶段，尚没有翻过第一座山头——需要先在手机上实现 VR，再拓展到其他设备。

Scott Flynn：关于发热，我认为情况在开始好转以前会越来越糟。设备将会整合更多传感器，用户希望能长时间的玩游戏、看视频。发热问题会拖后腿。

我们还需要电池技术的突破进展。下个十年中，每重量单位的电池要有五倍左右的电量增长，才能保持现在手机的轻薄程度。发热确实是一个主要挑战，但也有其他需要实现的技术。比如移动物体追踪，包括手、躯干等。我们会用六按钮 VR 控制器或三按钮控制器实现这些。但长期来看，用户希望摆脱控制器。VR 设备需要识别用户的手和身体，识别其他人的手和身体，这需要很多的 CV、机器学习技术来实现。

主持人：从内容、引擎制作者的角度来看，有没有具体的难关要客服？比如采用不同方式与硬件交互？

Nizar Romdan：我想提两点。VR 是一个沉浸式体验，但现在头显设备的视角不够宽广，用户需要左右转头看才能得到沉浸式体验。性能是一个很大的问题。为了高保真的内容，需要提高分辨率。这不仅是硬件上的挑战，对图像渲染也是。

Tom Olson：Nizar 对技术难关话题进行了很好的扩展。在不远的将来，我们都要视网膜中央凹渲染（foveated rendering；即集中计算资源对位于用户视角中心的图像进行高清渲染）。在分辨率不够好的情况下，这是比较好的解决方案。

Adam Gousetis 我来自主机圈子，主机的刷新率、分辨率是 30 Hz，720p，手机是 1440p、60 Hz，很多 PC 已经是 90 Hz。我们的手机早晚会装上 4K、90Hz 甚至比这更高的显示屏。这是非常多的像素，比主机行业过去面对的多得多。带宽会是另一个重要的瓶颈。每个人都想要更多的像素，让显示效果变得更好。更高的刷新率也会让游戏更流畅。

Scott Flynn：我们还需要结合眼球追踪的视网膜中央凹渲染。把视线聚焦在一点是非常自然、符合人类习惯的，但如果视角周边的图像变得粗糙，能看得见像素点，会是一个非常糟糕的体验。但眼球追踪有太多复杂的地方。

Tom Olson：大约六年前，我开始戴双焦眼镜（bifocal glasses）。如果你戴过，就会知道这是种什么体验。我可以告诉大家，它有个最佳视点，如果你想要视线聚焦地很好，必须通过那里看。刚戴上双焦眼镜的一个月内，任何人都会极度懵逼。但一个月后你就对它变得习惯，并且培养出来新的条件反射：当听到什么声音，你的脑袋会恰到好处地转过去，最佳视点刚好对准对方。在实现眼球追踪之前，即便是固定不能动的视网膜中央凹渲染，我认为也是可以的——当用户习惯了之后。当然，有眼球追踪更好。但这是一个相当大的技术难关，固定的视网膜中央凹渲染更简单。

Micah Knapp：更简单也更糟糕（笑），但你会习惯。作为一名骁龙的员工我需要提一下，通讯是一个非常关键的因素。视频是驱动 VR 发展的主要力量，低延迟、高带宽的通讯，比如 5G，需要整合到头显设备里，用户能在极低延迟的情况下，极其快速的传输大量数据，这会是 VR 技术飞跃的转折点。

主持人：VR 生态为开发者提供的机会非常特殊：用户很不一样，技术很不一样。对于想要进入 VR 领域的开发者，你们认为有哪些比较明显的机会？

Scott Flynn：很明显，现在仍然有设立标准的机会。最合适的人机界面和交互方式，即 VR 的“键盘鼠标”，还没有被找出来。我相信会有开发者偶然发现它，把全行业带往正确的方向。在未来的某个时间段，某个掌握了这些东西的爆品游戏或内容一定会出现。

在泛 XR 领域，通过制作适配于环境的内容，开发者有机会创造出全新的独特体验——这在主机游戏市场永远不可能实现，因为内容要在硬件发布之前完成。我认为，下一代的娱乐方式将从此诞生，把游戏带上一个全新台阶。

Nizar Romdan：我们认为主要的机会在于 ——VR 游戏是不同的体验。这可能会产生全新一代的游戏玩家，你制作的游戏也有可能在将来成功吸引到这批人。因此，我们决定投身于创造“交互体验”的游戏内容，让玩家在里面拥有控制权。

Micah Knapp：移动开发者和移动端 XR 开发者有一个巨大的机会：移动平台有相当多的计算引擎，不像 PC 只是 CPU 和 GPU。可以把工作量分散于更多专用硬件，创造出更多的使用场景。精灵宝可梦是一个例子：它利用了 GPS、摄像头。但这还只是在婴儿期。用户正越来越习惯移动平台。

Adam Gousetis：VR 很难搞，是我所做过的最难做的工作，不论是深度广度均是如此。它涉及到智能手机、应用开发的方方面面。不管是在哪个 VR 平台上，开发 VR 内容的经验、知识，一定是能够转移到其它领域的。

Scott Flynn：虽然现在的话题是 VR 游戏开发者的机会，但游戏之外的机会极其多。举个例子，在汽车制造领域，VR/AR 技术有机会节省千百万美元的原型车研发费用。如果你能在一个行业、或行业内的细分市场，向企业成功展示出 VR 能如何能帮助他们竞争，就有潜力逐渐拿下这块市场。现在，B 端是 VR 的黄金地带。

Adam Gousetis：我仍然在期待一个上手体验自然、不需要费脑筋的 VR 交互界面。

Scott Flynn：那，这就是一个机会。

主持人：区域差异呢？世界不同区域、国家，它们的不同社会群体，对 VR 怎么看？这对商业计划、软硬件开发产生了哪些影响？

Nizar Romdan：我会以中国为例，我们正与几家中国的头显制造商合作。对于 VR，中国存在一个市场，这或许是由于中国的体量——很小的人口比例都可能是一个相当大的用户群。我们从合作伙伴那里得知，某些 VR 体验正在中国快速流行起来，比如线下 VR 游戏体验馆四处开张。我们收到了很多对多人 VR 体验馆游戏内容的需求。现在，越来越受到中国市场欢迎的设备是一体式 VR 头显。

Micah Knapp：中国有个有意思的地方：从来没有出现过一个成熟的主机市场。从游戏的角度看，相对于主机和电视，移动设备并不需要显示太多东西，因此能够更快速地被中国用户接受。XR 有着同样的机会，中国用户客厅里的那块大显示屏（电视）并不与之竞争。

另外，中国政府把 VR 看做是一块非常重要的基础技术，未来五年内会加大投资力度。当存在一个大力推动这项技术的政府，我们应当会看到更快的普及速度。

Adam Gousetis：我想说的并不是地理区域差异，而是 VR 技术面向的不同社会群体。有一个事情我们大家都在做：怎么让 VR 有更强的社交元素。这是因为 VR 有一定的反社交倾向——戴上头显之后，你看不到周围的所有人，他们也无法和你交互。手机则不同。虽然大家对重度手机用户有刻板印象——每个人看着自己的手机，不互相交谈。但实际上，当我用手机的时候，仍然可以和身边的朋友交谈。我们非常需要让 VR、AR 的群体使用体验变得和个体使用体验一样有吸引力。

Scott Flynn：还有另一个地区方面的考虑。在北美，你可能住在一幢 1000 平米的别墅里面，有多余房间作为 VR 活动室，安装追踪摄像头。但在东京，他们的一栋房子可能只有我们的客厅那么大。怎么让用户在有限空间里使用 VR？ 如果不正视这个问题的话，我们就把 VR 限制在了一个很小的用户子集。

主持人：今天的圆桌对话嘉宾背景十分多样，有硬件、软件工程师，有内容制作商。你们怎么看待整个生态？对现状是否满意？是否忧虑？

Scott Flynn：我的工作沟通经常遇到一大串 Unity、谷歌、ARM 之间来往的 email，我们之间有非常多的合作。

Tom Olson：这是一个竞争、合作相互平衡的博弈游戏，我们会互相竞争。出于法律原因，我不能讲很多。但我在 Khronos 一待 12 年的原因之一，是因为我喜欢这个模式，我喜欢这里竞争合作之间的的平衡，这也是各个行业最基本的现象。平台、引擎的出现，是一个让这些得以实现的关键因素。比如，骁龙和 ARM 在 GPU 上竞争，但我们用同一套系统交互，这给了我们机会来表达不同意见，推动各项事业前进。

Adam Gousetis：让我十分兴奋的是，OpenXR 是一套正在落地的针对 XR 内容的标准。将 API 服务标准化是一个机会。我对白日梦、安卓、骁龙、ARM 之间的整合感到高兴。没有一套整合起来的工程方案，开发一套 VR 系统是很困难的。单是我们做到了这件事，就足以让人感到欣喜。

Tom Olson：之前我提到，像主机那样标准化是很危险的，在现阶段也不可能实现。不过 OpenXR 做的和主机不一样，我认为它达到的是比较合适的标准化程度。这里的关键是：怎么在产品实现差异化的同时，让同一个 APP 能在不同的设备平台上使用？这会是一个不断平衡的过程，也让 VR/AR 市场变得更有趣。

Nizar Romdan：作为开发者，我们和三星、ARM、Facebook Oculus、谷歌都有很好的合作关系。但我得承认，我并不清楚其他内容创业公司的情况。我们做的是 XR，必须要搞行业关系。对于 VR 创业公司而言，情况可能完全不一样。

相关文章：

Neurable 让你用意念玩 VR 游戏 | SIGGRAPH 2017

SIGGRAPH 2017展览区终于开放，图像的未来就在这里

独家 | 英伟达“把 AI 带到计算机图像”，三大新品亮相 SIGGRAPH 2017

SIGGRAPH 2017：一窥 AR/VR 最新趋势

。