搜索
NFT元宇宙Web3
近期热门

Meta的跨设备通信技术正在帮它建设一个更好的元宇宙体验

Founder

吹叶机与Meta公司有什么关系

每天都有数百万人使用Meta的Messenger和Instagram应用进行视频通话。在我们最近的谈话中,Meta的远程呈现产品总监Connor Hayes解释说,通过这样做,他们也在帮助该公司创建能够改善虚拟世界中实时通信技术。

Hayes强调说,连接手机和AR/VR设备是这项工作的一个重点。实现跨设备类别的实时通信是他的团队攻坚的一大目标。他说:”对于这些设备的前几个版本,我们在其中构建的社交体验只有在设备之外的沟通能力才有价值。”

  • 这是许多Quest的用户可能会涉及的问题。即使你有朋友也有VR头盔,但他们可能不会和你同时使用它们。如果能够在他们的手机Messenger应用上给朋友打电话,那么联系起来就会容易得多。
  • Hayes说,AR硬件也将是如此。”如果我可以在第一天就得到AR眼镜,并且知道我在WhatsApp或Messenger上连接的每个人都可以通过这些设备联系到我,这只是为该设备增加了一个基线水平的社交价值。”

改善跨设备沟通可能是成功的关键,即使这些设备在进一步分化。这包括为化身的面部表情制作动画,这一点将得到未来VR头盔上面部追踪硬件的支持。

  • Hayes说,Meta的远程呈现团队一直在研究如何将这种体验移植到低端设备上,让人们选择表情来表达自己。
  • “他说:”如果有人使用的手机可能没有相同的计算能力来运行脸部追踪模型,使他们获得最佳的表达水平,我们可以给他们一个版本的产品,他们可以手动调整说:’这是我微笑时的样子’。

跨设备的挑战对Meta来说并不新鲜。该公司在桌面和移动设备上实现视频通话已经有一段时间了,近年来还在门户智能显示器和电视上增加了通话功能。

  • 最初,这些努力在整个组织中是零散的。这就是为什么Hayes的远程呈现团队在2020年夏天就位,以建立跨客户和设备的桥梁。
  • 这项工作的一部分已经致力于Meta内部称之为 “项目光环 “的东西。”Hayes说:”这实际上是一个新的通话体验设计系统,使所有这些表面的东西都保持一致。
  • 一些非VR的挑战涉及确保来电者在各种屏幕上看起来都很好,无论通话中的任何人使用的是垂直还是水平方向的屏幕–这有助于团队思考如何在AR和VR中表现来电者。
  • 另一个大的技术挑战是背景噪音。研究如何抑制移动端上的背景噪音,也有助于改善VR的沟通。
  • Hayes说:”如果一个吹叶机在我旁边响起(在传统的视频通话中),你可能会合理地认为有一个园丁。如果我们在麦莉-赛勒斯的VR音乐会上,你听到我身后有吹叶机的声音,这可能就有点奇怪了。”

社会规范可能和那些技术挑战一样重要,拥有庞大的移动用户群,有助于Meta公司了解我们在元宇宙中可能要如何相互交谈。

  • Hayes说:”[作为]每天花八小时进行视频通话的知识工作者,我们对实时通信的看法是基于我们被要求做的一种形式,而且是有报酬的。你不应该在对方面前说话;没有静音和有背景噪音是不礼貌的。”
  • 他说:”在消费者视频通信中,这些规范并不真正以同样的方式存在。相反,消费者经常在看电视或做其他事情时将视频通话作为第二个屏幕。
  • 这导致Meta公司引入了小游戏、过滤器、共同观看和其他东西,以帮助人们以更有趣的方式进行联系–这些东西也适用于使元宇宙交互不那么尴尬。

Hayes说:”这些都是我们可以学习的东西,[以]优化VR中沟通的默认体验”。

编辑于 2022-05-09 04:32
「 真诚赞赏,手留余香 」
赞赏

发表评论已发布0

手机APP 意见反馈 返回顶部 返回底部