想要率先领略5G机会?欢迎走进XR的世界
专家预测,扩展现实(XR)设备可能会取代智能手机,成为我们首选的移动设备。与此同时,沉浸式虚拟音乐会正成为全球演出活动的新风向。现在时机正好,让我们一起了解XR带来的机会,以及爱立信的Startup 5G计划如何助力畅想变为现实。
信观察
你是否有幸看过你最喜欢的表演者的演唱会?也许你只能坐在视野有限的座位上,或是淹没在拥挤的人群之中?现在想象一下,你就在表演者的旁边,近到可以看见他们的手指在琴弦上跳舞。或许你还能和他们互动?或者把你的崇拜之情表达给身边朋友的数字化身,在成千上万人组成的虚拟世界中尽情狂欢?
扩展现实(XR)似乎仍然是一个遥远的概念,仿佛来自异次元的虚构想法。但是有了初创公司研发的新XR技术,再加上5G和边缘计算的强大功能,像前面描述的沉浸式多用户体验将不再是幻想。
正如我们最近在“爱立信技术评论——聚焦扩展现实”上所讨论的那样,许多专家认为,新兴XR技术可能会引发电信行业的下一次重大范式转变。甚至会影响到终端产品,使得时尚、轻便的XR眼镜取代智能手机,成为移动网络中的主导设备。最近,在巴塞罗那举行的世界移动通信大会(MWC)上,观众们目睹了一场史无前例的虚拟音乐会。他们发现,XR技术已经到来,并准备好永远改变我们体验周围世界的方式。
MWC上的XR虚拟演示汇集了一系列不同的技术和功能,这些技术和功能以前只能单独使用。其中包括:表演者的立体视频、远程渲染、虚拟化身、数字音乐会,以及前所未有的可扩展性,可以跨虚拟现实(VR)头显、智能手机甚至增强现实(AR)眼镜工作。这种技术和功能的组合,不仅提供了更好的数字体验,让表演者看起来就像在现实生活中一样,它还展示了一项新技术的可扩展性——能够远程渲染和流式传输高质量的XR内容,创造一个完全沉浸的体验,让成千上万的人不仅可以观看表演,还可以与彼此互动。
但是,如果没有爱立信Startup 5G计划所带来的生态系统合作,这种史无前例的演示以及其他许多演示都不可能实现。
建立初创公司与运营商之间的桥梁
爱立信Startup 5G计划由爱立信研究中心下属的消费者研究室创立,旨在建立和促进运营商(CSP)与创业社区之间的合作。该计划借助爱立信的全球洞察力、技术和行业专业知识以及本地业务,与运营商展开合作和对话,并在其指导下,确定并推荐初创公司的解决方案,这些初创公司的解决方案可以帮助运营商将5G创新变现,提升其服务水平,并从长远来看,在XR等新兴技术的价值链中发挥更重要的作用。
通过加入爱立信Startup 5G计划,初创公司将有机会与运营商合作、参加重大活动(包括国际和本地活动),并在活动上展示他们的解决方案。这些活动包括美国圣克拉拉的Imagine Possible、沙特的Leap、阿联酋的GITEX和巴塞罗那的MWC。该计划目前已吸引60多家初创公司,其中一半在XR领域。试举三个例子,Condense、immersion和QuarkXR,它们都在以不同的方式努力实现如真实世界一般的沉浸式体验。接下来我们将更深入地探讨QuarkXR平台的案例,深入了解QuarkXR公司的技术,以及为什么它有可能将XR推向大众。
将XR体验带到边缘的初创公司
阻碍XR新用例落地和变现的一个关键因素是:沉浸式体验和应用涉及大量的计算和渲染。但是,新兴技术正在利用5G独立组网(SA)的确定性时延,以及边缘计算来减轻设备的繁重负载,使得人们在任何地方都能体验到高分辨率沉浸式XR。这正是QuarkXR(一个XR云流媒体平台)正在努力实现的目标。
XR的承诺(至少在沉浸式VR方面)是提供与现实无法区分的体验。实现这一目标的一个关键里程碑是确保内容传输速度足够快,用户在移动头部时不会感觉到时延或眩晕。当涉及到繁重的计算时,这会是一个切实的挑战。如今,沉浸式VR体验和游戏需要算力强大的电脑或游戏主机才能实现,甚至轻型的XR眼镜通常也需要连接到智能手机上,让它协助进行计算。
边缘计算和5G帮助创造精彩的新现实
QuarkXR利用位于边缘(靠近最终用户)的高性能英伟达(Nvidia)GPU来进行复杂的渲染,并运行计算量大的XR应用。连接到的边缘位置(通常是本地云平台)是根据用户位置来选择的,这意味着对不同平台(亚马逊网络服务、谷歌云、微软Azure等)的支持是关键。由于XR应用是独立于云平台的,它可以托管在最佳且最近的可用位置,而且即便使用了不同的云平台,也能创建出一致的体验。
高保真的立体视频可以实现逼真的沉浸式内容。像我们的数字音乐会这样的XR应用,很容易就会使用超过每秒100Mbit的带宽,甚至更高,具体取决于摄像头的数量。在多用户场景中,消耗的总带宽将随着用户数量线性增加。这些用户使用AR设备观看立体视频。
但对于QuarkXR,在应用渲染完成后,它会提取每一帧,将其压缩成视频,并通过5G网络发送,将内容直接流式传输到设备上,根据用例的不同,只需15Mbit、20Mbit或30Mbit的带宽。举一些现实生活中常见的例子来说明:Teams等在线会议软件使用WebRTC技术。用户在网络连接良好的状态下进行视频会议,通常感觉就像在线下一样的即时对话。它们很快,但QuarkXR要比它们快十倍。
通过使用云和边缘技术来分担计算和渲染负载,并利用低时延流媒体所需的5G SA,QuarkXR平台可以为数百甚至数千人提供功能强大、精彩的XR体验。例如,在游戏领域,消费者希望有高质量、近乎真实的图形和3D资产,QuarkXR能够利用当前XR设备的能力(与PlayStation 3的图形能力相当),提供更像PlayStation 4或5的内容。这在画质方面实现了代际飞跃。
QuarkXR技术还内置了安全保障机制。即使网络丢失了一帧(即使在最好的网络上偶尔也会发生这种情况),算法也可以使用最后一个视图来创建一个人工模拟帧,这样用户仍然可以看到一个差不多的内容视图。这有助于确保响应迅速、无缝的XR体验。最终,用户甚至区分不出内容是在本地生成,还是流式传输过来的。
QuarkXR的另一个显著优势是:QuarkXR平台是硬件无感知的(这意味着它可以用在各个主要XR设备上),不需要开发人员集成任何软件开发工具包(SDK)。这使得开发人员可以轻松地把内容搭载到QuarkXR平台——通常几天内即可完成。开发人员只需要提供内容的桌面版本,就可以在这个平台上运行了。通过避免这个摩擦点,那些开发XR软件的小型初创公司,即使在资源有限的情况下,也可以使用这个平台来搭载他们的内容,从而创建新的收入来源和潜在用例。
XR的关键用例——由5G和边缘计算驱动
由于XR技术的性质,以及它提供的新的交互性和沉浸感,现实和详细或先进的3D XR应用往往代表着最大的机会。游戏领域的XR已经是一个相当成熟的市场,沉浸式娱乐应用(如智能体育场的活动,或在世界移动通信大会上展示的虚拟音乐会)已经成为现实。但我们也看到了一系列在娱乐和游戏之外运用XR的应用。
远程工作平台、劳动力发展和培训设计、建筑可视化和虚拟展厅都有非常成功的实际案例。打造一个交互式XR展厅会有很大的优势,它使得顾客能够随时参观展厅——尤其是在结合了其他技术的情况下,比如结合Convai的AI驱动的化身。试举一例,一家房地产中介可以创建一个房地产经纪人的化身,向其输入有关房产的信息,并让他在XR虚拟住宅中迎接数以千计的潜在买家,这些XR虚拟住宅随时敞开参观,潜在买家无论身处何地,都能随时访问这些虚拟住宅。
这意味着巨大的商业机会,并且可扩展到其他许多行业中。汽车公司、零售商、消费电子制造商、建筑师或建筑商都可以从交互式销售体验中受益。
XR应用获得成功的秘诀是什么?
虽然有像“Pokemon Go”这样知名的成功故事,但根据Oculus Publishing的数据,Meta Quest Store上还有40多款来自小公司的游戏,这些游戏的收入超过了1000万美元——这是一笔巨大的投资回报。QuarkXR的联合创始人兼首席执行官Krasi Nikolov表示,XR成功的秘诀并不在于制作大IP或拥有复杂的技术能力。
“我们看到的那些获得了成功的应用,都是一些充分利用了XR的简单应用。内容开发者不应该局限于为已经存在的事物制作XR版本。他们应当专注于互动性或沉浸式带来的可能,充分发挥XR这个媒介的优势。有哪些独特的内容只能在XR中实现?随着时间的推移,我们可以期待看到更多以XR为先的内容和IP。”
Krasi继续说道:“另一种有效方法便是利用社交互动元素,并开放可访问性。让用户生成内容,并为他们提供好的工具。VR Chat这个社交平台就是一个很好的例子。这个平台并不局限于XR,它的内容也可以通过浏览器访问,向更多的用户开放,帮助建立XR产品和应用的知名度。每个人都可以参与,但XR功能也得到了展示。”
这种曝光率和市场认知度因素实际上发挥着重要作用。这个行业面临的最大的挑战之一,就是人们不知道它的优势,或者它能实现什么。
Krasi解释说:“大多数消费者购买VR头显只是为了尝试一两个他们喜欢的游戏。但还有很多其他的好应用值得体验——无论是工作应用,还是娱乐应用。我们真的需要教育市场,因此开放功能较弱的版本(如浏览器、桌面或移动版本)是一个很好的策略,可以帮助实现这一点。”
实现XR的未来需要什么?
This is still a new industry, and bringing the different partners and XR仍然是一个新兴的行业,将不同的合作伙伴和技术结合在一起可能非常具有挑战性。为了使XR蓬勃发展,它需要整个生态系统的支持,特别是在以下领域:
- 易于使用的内容生成工具
对于XR应用来说,内容是一个很大的挑战,因为3D内容生成通常复杂而昂贵。使内容生成变得简单的服务和工具将至关重要。AI可能会发挥重要作用,例如生成式AI工具可以按需创建3D内容,就像MidJourney根据给定描述创建图片一样。 - 生态系统参与者之间的合作
正如前面提到的,让市场了解XR的可能性是一个巨大的挑战。许多运营商已经在5G和边缘计算方面投入了大量资金。如果他们了解到XR的新用途和商业案例,他们就可以利用这些新用例来增加收入。为了充分发挥XR的潜力,运营商(CSP)、公有云服务商(HCP)、应用开发商、芯片组供应商、设备制造商和其他生态系统参与者,需要建立联系并展开协作,这就是为什么像爱立信的5G Startup计划这样的举措如此重要。 - 便于全球扩展的通用标准
为了扩展XR应用,必须简化它在边缘计算和5G方面的开发。建立通用的标准,让内容可以集成和扩展到各种市场和用例中。为实现这一目标,爱立信正在创建5G方面的标准,并开发5G API,这些API让不同的应用能够根据自身需求以特定的方式利用5G。 - 构建连接和功能
正如我们所展示的,释放XR的全部价值,需要满足特定的需求,如连接、网络和边缘计算。5G SA对于支持XR的低时延需求至关重要,边缘计算是分担繁重计算的关键工具。QuarkXR可以在这个方面提供支持,但是所有的生态系统参与者(如运营商和设备制造商)都需要参与进来,创造必要的条件,实现XR的全部潜在价值。
阅读《爱立信技术评论》特别版“聚焦扩展现实”
点击阅读
XR会成为我们的首选设备吗?
那么在未来几年,XR设备真的会取代备受大众青睐的智能手机吗?如果XR技术和必要的连接逐步到位,这似乎是可能的,而且这种愿景终会实现。在不久的将来,智能手机可能仍然需要作为配套设备,为XR眼镜提供5G连接和算力支持。但这可能只是演进过程中的一个过渡阶段。
在某种程度上,我们已经在苹果手表(Apple Watch)等智能手表上看到了这一点。它们在迭代了几个版本后才集成了连接功能,这样就可以独立于手机使用。相比XR设备,增强现实(AR)设备则功能更强、更灵活。它们只需要连接和应用就能实现功能。未来许多物理设备都可以被数字产品取代。你可以戴一个手表模样的AR设备。当你看向手腕,它就会在那里投射并渲染出手表的图像。唯一的问题是电池续航时间,尤其是对纤薄时尚的设备来说。但是,通过将大部分XR处理转移到移动网络边缘,设备能耗可以降低七倍以上。
过去,VR头显的重点一直放在制造材料上,以保持低成本。但最近,设备制造商开始对侧重远程渲染的头显产生兴趣。它们只是接收器,仅能进行简单的渲染。这些头显必须是5G原生的,以支持更好的连接性和低时延。如果需要在户外使用,这一点就更加重要。但这也为运营商带来了新的变现机会,因为部分硬件成本可以由数据套餐来补贴,就像我们今天用数据套餐对一些智能手机成本进行补贴。
从长远来看,我们能有哪些期待?
随着生态系统和技术的成熟,运营商将有更多的机会,在价值链中发挥更大的作用,并向不同的角色扩展,比如成为服务赋能者,而不仅仅是服务提供商。那时,我们就进入了基于许可的XR领域——创建XR数字资产和应用,投放到物理资产之上。品牌可以使用这些资产,比如在建筑物上做广告,但那将是互动性广告——消费者走过大楼,广告就会弹出,XR内容在数字孪生场景中出现。
如果XR技术和生态系统得到适当的培育,那么XR将为新的收入机会提供肥沃的土壤。接下来的问题是:您希望您的(虚拟)现实是什么样子?
扩展阅读
了解更多有关沉浸式技术的信息,它将如何改变我们的生活和工作方式。
了解有关爱立信Startup 5G计划的更多信息,该计划将运营商(CSP)与合适的消费类创新合作伙伴联系起来,帮助加速5G的商业化和变现。
听听Emerging Technologies公司副总裁Mischa Dohler对MWC 2023、AR/VR的发展以及元宇宙的低迷的看法。
在我们最新的Imagine Possible Perspectives中,探索连接性对数字和现实世界体验的影响。
阅读我们的生态系统演进系列博客,从而更好地了解围绕IT和5G不断变化的生态系统。
相关内容
Like what you’re reading? Please sign up for email updates on your favorite topics.
Subscribe nowAt the Ericsson Blog, we provide insight to make complex ideas on technology, innovation and business simple.