世界今热点：Meta推出Shared Spatial Anchors API；Soundcore为Quest 2推出无线VR蓝牙耳机

看日报是个好习惯

2018年，Meta首次展示了其本地多人游戏，当时Oculus Connect 5的访客可进入一个450平方英尺的场地，在不借助外部传感器的情况下使用Oculus Quest进行游戏比赛。

今年Meta Connect会议上，Meta宣布推出一个本地多人游戏接口：Shared Spatial Anchors API（共享空间锚定API），该接口是对2021年发布的Spatial Anchors API一次扩展。后者允许对虚拟对象进行永久性的空间锚定，而前者则更进一步，允许同一空间中的多个用户共享锚点。

Shared Spatial Anchors API结合配备了MR和空间识别功能的Meta Quest API，可创造出更多令人兴奋的新游戏类别。如《Beatshapers》，玩家可以在该游戏中与客厅地板上的遥控坦克进行战斗；《Spatial Ops》可将家里的墙变成激光竞技场。

【资料图】

除游戏外，新的API还可以用于改善办公体验，如Meta为《Horizon Workrooms》开发了一项名为Magic Room的新功能，该功能可以让用户共享锚点以进行虚拟协作。

Shared Spatial Anchors API预计将在今年晚些时候推出，首批本地多人游戏最早可能会在2023年推出。Meta为Quest Store新增了MR类别以推广此类内容。

Signpost和Lynx达成合作，将为比利时的学生带来1000个MR头显

近日，法国 XR 硬件公司 Lynx 和比利时 ICT 教育硬件公司 Signpost 宣布达成合作，将在 2023 年为比利时的学生带来混合现实头显 Lynx R-1。

图源：lynx

据悉，Signpost 和 Lynx 将于 2023 年进行硬件部署，首批 Lynx R-1 头显为 1000 个，Signpost 将为客户提供服务和认证维护支持。

Signpost 集团首席执行官 Arne Vandendriessche 表示：XR 的应用将是教育领域的不二之选，我们在与学校的接触中看到了这一增长机会，我们也看到了政府在这方面发起的招标。因此，Signpost 也在重点关注这一板块，选择市场上所能提供相关硬件的最佳 XR 合作伙伴，而 Lynx 是显而易见的选择。

官方在 PR 稿中写道，技术规格以及对隐私的尊重是选择 Lynx 作为合适 MR 头显提供商的关键因素。遵守 GDPR 和数据所有权，加上优惠的入门级价格，也使该设备非常适合教育。

REALITY公开元宇宙时代虚拟演奏技术AI Fusion演示影像

REALITY是日本聚逸株式会社（GREE, Inc.）旗下的全资子公司，其研究开发部门GREE VR Studio Laboratory今天公开了一段技术演示影像，展示元宇宙时代的虚拟演奏技术AI Fusion。

近年来，人们期望在三维空间中提高虚拟化身的表现力，以便在元宇宙中提供服务。虚拟化身技术是个人用户的表现力和实时动作生成技术的融合，这种技术的改进将扩大创作者经济的价值和可能性。

这次发布的视频，通过将元宇宙手机App“REALITY”中的虚拟化身和智能手机的面部识别以及“AI Fusion”技术相结合，实现了高度表现力且多变的音乐演奏。

视频中的原创歌曲《Tsuyuhanabi》专为此次实验编写（作词/作曲：菜那），系统基于该歌曲生成了正确演奏四种乐器——钢琴、吉他、贝司和架子鼓的手臂与手指动作。

视频展示出“AI Fusion”技术动态地融合了整个身体的运动和面部表情，使表演者能够在实时视频中自由地进行自然和高级的表演。唱歌时的面部表情是通过元宇宙手机App“REALITY”以及通用算法录制的，而全身动作则是在Crescent公司录制的。

利用这次开发的技术，将来有望实现在一个自由的空间里，只使用智能手机与其他用户同时以全身动作来进行歌唱和任意音乐的高级表演。

音频品牌Soundcore为Quest 2推出无线VR蓝牙耳机

安克创新旗下的音频品牌Soundcore（声阔）宣布推出无线VR蓝牙耳机VR P10，这是一对与Meta Quest 2 VR头显兼容的无线游戏耳机。该设备配备11毫米的驱动器和Soundcore的BassUp技术，可通过蓝牙5.2或2.4GHz高速连接以无线的方式提供清晰、干净的音频。

图源：Soundcore

Soundcore VR P10耳机现在可以通过Amazon、soundcore和Meta的官方商店购买，价格为99.99美元。该设备可与iOS和Android移动设备、PC和主流游戏机以及使用加密狗的Meta Quest 2兼容，并使用soundcore应用程序在它们之间进行切换。

图源：Soundcore

安克创新的创始人兼首席执行官阳萌表示："我们很高兴VR P10将成为获得Meta认可的音频产品，我们新的低延迟耳机将成为Meta Quest 2用户的完美游戏配件之一。"

Soundcore的LightningSync无线技术可将音频延迟降低到30ms。该设备有4个内置的麦克风，具有波束成形功能，以减少不必要的背景噪音。在电池寿命方面，VR P10耳机单次充电可持续约6小时（使用充电盒可持续24小时）。直通式充电允许用户在使用时通过设备外部的USB-C端口为加密狗充电的同时为Quest 2充电。

Meta Quest Store内容收入突破15亿美元

不久前举办的Meta Connect 2022上，Meta宣布自2019年以来，用户在Quest Store上的购买内容已经超过15亿美元。

Meta Quest Store收入图（图源：RoadToVR）

这一数据表明，自今年2月Meta公布Quest平台收入突破10亿美元之后仍在持续增长，Quest Store平均每月收入已从5060万美元增加到近6000万美元。虽然仍在增长，但其增长速度可以从下图中看到放缓，这可能由于游戏行业的季节性影响。

Meta Quest Store 收入月度平均增长（图源：RoadToVR）

此外，Meta公司没有提供关于15亿美元收入的细节，但该收入可能包括通过官方Quest Store和App Lab销售的游戏、应用程序、DLC和订阅，也可能包括购买后在Oculus PC平台上交叉购买的游戏。

苹果新专利显示未来或使用IMU VR手套控制MR头显

近日，一项新发现的苹果VR专利显示，该公司计划使用能够测量手指和拇指运动的VR手套作为控制其突破性MR头显的可能手段，该头显产品预计将在明年首次亮相。

图源：WIPO

MySmartPrice在中国国家知识产权局数据库中发现的一项专利显示，苹果公司在2018年提交了一项 "基于IMU的手套"专利，描述了"能够测量单个指骨和拇指骨运动的VR手套"。这些手套可能包含运动传感器和陀螺仪，以测量运动、方向和位置，以及速度，甚至包括一个磁力计，以确定地球磁场的方向。该专利还包括可以感知方向和触摸以及指尖之间接触的电极的规定。

正如MSP所指出的，该专利附有文件，"还提到该手套可与VR技术一起用于军事训练、电子游戏、教育和其他方面"。

苹果以前曝光的专利揭示了类似顶针的手指控制器，也可以作为一种控制方法使用。

这份新报告是在上周的一次重大泄漏之后发布的，该报告显示，苹果VR将采用虹膜扫描，用于生物识别安全和支付。它还声称该头显将由包括玻璃、铝和织物在内的优质轻质材料混合制成。

Meta公司最近发布了其新的Quest Pro头显，价格为1500美元，然而，报告显示苹果的头显价格可能高达3000美元。其他传闻中的功能包括用于运动和脸部追踪的一大片摄像头，以及双8K显示屏。

虽然苹果的新头显产品还需要几个月的时间，但该公司预计很快就会推出带M2的新iPad Pro，以及新的第十代iPad。

苹果新专利：利用机器学习及3D运动相机识别用户手势并控制设备

今天，美国专利商标局正式授予苹果公司一项专利，该专利涉及提供精炼的合成数据的方法、系统和/或技术，例如用于训练机器学习模型。苹果公司的专利描述了机器学习如何与设备上的3D运动相机结合使用，以更好地准确解释手势、姿势等。

苹果公司的专利图1是一个逻辑框图，说明了一个被配置为实现一个或多个系统、方法和/或技术的系统；图2说明了合成图像和相应的真实图像之间的数据分布差距；图9A和9B说明了一个示例的深度帧和相应的合成图像，用于一个例子的手部姿势数据集。

图源：patentlyapple

苹果公司指出，生成器（图1，#120）可以与合成器#110耦合，从而允许合成数据（例如，合成图像）被细化，例如使其更加真实。根据各种实施方案，所得到的精炼合成数据可用作其他机器学习应用的训练数据（而不是真实数据），如文本检测、文本分类、字体识别、物体检测、物体分类、手部姿势检测、手部姿势估计、手部姿势分类、场景识别、人体姿势检测、人体姿势估计和/或人体姿势分类。

更具体地说，根据一个实施方案，苹果公司的上述图9A说明了一个示例深度帧，图9B说明了手部姿势数据集的相应合成图像。例如，在一个示例性实施例中，合成器#110可以被配置为基于包括由多个三维运动捕捉相机（例如，一个正面和2个侧面视图）捕获的训练帧的手部姿势数据集生成合成手部姿势图像。例如，在一个例子中，可以使用来自正面相机的深度帧。

苹果公司的专利图10说明，根据一个实施方案，来自手势数据集的真实图像样本。

苹果公司描述了手势被解释为 "通用计算机系统"，如iMac和 "其他设备"，这也可能适用于他们未来的混合现实头显，众所周知，混合现实头显提供上述的多个三维运动捕捉相机系统。

至少从2016年开始，苹果就一直在研究手势识别。想了解更多关于这项技术性很强的专利细节，请查阅苹果的授权专利US 11475276 B1。

苹果新专利曝光，涵盖基于头到躯干方向的空间音频再现系统

近日，美国专利商标局公布了一项苹果公司的专利申请，题为 "基于头到躯干方向的空间音频再现"。

苹果公司的专利涉及一种媒体系统和一种使用媒体系统根据头到躯干方向再现空间音频的方法。该方法包括根据头部追踪设备产生的头部方向数据，确定头对源方向和头对躯干方向。

确定头到躯干的方向包括根据头部的运动确定躯干的运动。当头部运动满足头部运动条件时，如预定的运动角度或运动模式，可以确定躯干的运动。一个基于与头部到源头方向和头部到躯干方向都对应的头部相关传递函数（HRTF）的双耳音频滤波器被应用于音频输入信号，以产生音频输出信号。音频输出信号会被播放，以准确重现具有声源向用户发出的声音的空间音频。

虽然专利申请中描述的目标设备主要是AirPods，包括AirPods Max，但该专利确实指出，本发明也将适用于iMac（台式机）、MacBook（笔记本电脑）和其他设备，如混合现实头显以及涵盖车辆的媒体系统。

苹果公司的专利图1是一个用户相对于声景中的声源位置的图解；图2是一个基于头到躯干方向的空间音频再现方法的流程图。

图源：patentlyapple

苹果公司的专利图4是一个用户的头部相对于声景中的声源移动的象形图；图9是一个头部高于躯干的网格生成的象形图，用于模拟头部到声源和头部到躯干方向的各种组合的头部相关传递函数。

苹果公司早在6月下旬就获得了这项发明的专利。上周，美国专利商标局公布了苹果公司增加的20项新专利申请，以保护他们的发明。以下是其中两项新的权利要求：

新专利权利要求#1：一种方法，包括根据设备产生的头部方位数据，检测用户头部的运动；根据头部运动确定躯干的运动，其中躯干运动与头部运动不同；选择与躯干运动相对应的头部相关传递函数（HRTF）；以及将双耳音频滤波器应用于音频输入信号，生成音频输出信号，其中双耳音频滤波器是基于HRTF的。

新专利要求#11: 一种媒体系统，包括一个或多个处理器，被配置为基于设备产生的头部方位数据检测用户的头部运动，基于头部运动确定躯干运动，其中躯干运动与头部运动不同，选择与躯干运动相对应的头部相关传递函数（HRTF），并将双耳音频滤波器应用于音频输入信号以产生音频输出信号，其中双耳音频滤波器基于HRTF；以及一个或多个扬声器，配置为播放音频输出信号以再现声音的空间音频。

关键词： 机器学习 多人游戏