高通宣布新的Wi-Fi标准——Wi-Fi 7,可增强低延迟XR体验
全球电信巨头高通最近宣布了一项新的Wi-Fi标准,即Wi-Fi 7。与传统Wi-Fi相比,速度更快,延迟更低,设备之间的干扰更小,有望让人们更容易体验更舒适的网络。
高通表示:“凭借高效的无线互联网速度和持续的低延迟,Wi-Fi 7提升了无线体验,并将加速新兴应用的发展,包括低延迟的扩展现实(XR)、基于社交的云游戏、8K视频流,以及同步视频会议和投影。高通技术公司的Wi-Fi 7解决方案推动了Wi-Fi的发展,提高了速度、延迟和网络容量,并支持320MHz信道、4K QAM和高级多链路实现等先进功能,如高带宽同步多链路。”
图源:高通官网
高通也将继续支持Wi-Fi 6和6E的发展,同时领导Wi-Fi 7标准的制定。
长期关注XR领域的高通,不仅上线了AR开发平台“Snapdragon Spaces”还成立了元宇宙相关基金“Snapdragon Metaverse Fund”,同时也与微软、史克威尔艾尼克斯、字节跳动等公司建立合作。
Meta推出Quest 2手部追踪2.0更新,大幅提高追踪稳定性
Meta公司今天宣布对Quest 2的手部追踪能力进行 "重大升级"。据称,"重新架构的计算机视觉和机器学习方法 "特别提高了重叠或快速移动的手和特定手势的可靠性。启用这些改进功能的SDK和操作系统更新将从今天开始推送。
Meta在2019年底首次将无控制器手部追踪技术引入初代Quest,在那时它仍然是一个"实验性"功能,直到2020年年中,Meta开始允许开发人员在他们的应用程序中使用这种新功能。
从那时起,我们开始看到一些游戏将手部追踪纳入他们的应用程序,甚至推出一些完全依靠手部追踪功能的游戏,如《Hand Physics Lab》(2021年)和《Unplugged: Air Guitar》(2021年)。
现在,在不到一年的时间里,Meta公司表示其为Quest 2的手部追踪能力带来了"重大升级"(该公司确认初代Quest不会支持这些新改进)。
这些改进得益于 "重新架构的计算机视觉和机器学习方法",它在关键方面提高了手部追踪的稳健性。
在Quest 2的1.0版本手部追踪中,当用户的手被遮挡或相互接触以及快速移动时,系统在识别用户的手部方面遇到了特别的麻烦。从用户的角度来看,他们的虚拟手在这些失去追踪的时刻会瞬间消失,只有系统再次检测到他们,才会重新出现。
图源:Meta
Meta公司表示,随着Quest 2上2.0版本的手部追踪功能推出,系统将更好地处理这些受阻和快速移动的场景,从而减少手部消失的情况。该公司称这是 "追踪连续性的阶梯式功能改进"。
图源:Meta
据说这次更新还改善了手部追踪系统的手势识别。手势识别寻找特定的手势,系统检测到这些手势是独特的,就可以作为输入。例如,捏合这种手势可以被识别为让用户"点击"Quest界面上的元素。
在下面的演示中,可以用"抓取"的手势握住虚拟物体,而且还展示了对拍手手势稳定性的改进。
图源:Meta
Meta公司说,Quest 2的手部追踪2.0更新将从今天开始通过SDK和操作系统更新推送。该公司说,已经在其应用程序中内置手部追踪功能的开发人员无需更改任何 API 调用即可使用升级后的系统,尽管它不会自动启用。该公司表示,开发者可以参考"即将发布的文档",在他们的应用程序中启用该系统。
此举应使Quest 2的手部追踪向Ultraleap靠近一步,Ultraleap迄今为止一直保持着业内前列的手部追踪功能,尽管目前还不清楚这两个系统将如何叠加。
First Contact Entertainment正在为PSVR 2开发新游
去年2月,索尼在PlayStation博客中承认PSVR 2正在开发中,消息一出关于PSVR 2的讨论不断。最近,外网网友发现游戏开发商First Contact Entertainment联合创始人兼游戏总监Damoun Shabestari的领英页面中显示,其工作经历中包含为PSVR 2开发的未公布项目。
图源:领英
从时间上推断,PSVR 2项目很可能仍处于开发阶段。《Firewall Zero Hour》于2018年发布,是一款PSVR独占游戏,同时也取得了相当不错的成绩(发布仅4天,登顶PSVR 8月下载榜)。而《Solaris OffWorld Combat》是于2021年发布的游戏,登陆Oculus Quest、Rift S和PSVR平台。
除了First Contact Entertainment以外,有越来越多的开发商被证实正在为PSVR 2开发项目,如nDreams、Coatsink和Cyan等。还有消息证实有些PSVR 2游戏项目是基于Unreal Engine 5开发而成。
苹果2项新专利曝光:未来HMD或配备低功率眼动追踪系统
近日,美国专利商标局正式公布了苹果公司一系列共67项新授权专利。在其中,有两项与HMD系统眼动追踪功能相关的专利。
HMD:低功率眼动追踪系统
苹果的第一个HMD授权专利涵盖了在虚拟和混合或增强现实(VR/AR)应用中进行眼动追踪的方法和装置的各种实施方案。一个VR/AR系统可以包括一个设备,如头戴式显示器、头盔、护目镜或眼镜(在此称为头戴式设备HMD),它包括一个显示器(例如,左和右显示器),用于在用户眼前显示包括左和右图像的框架,从而向用户提供三维虚拟视图。
一个VR/AR系统还可以包括一个控制器。控制器可以在HMD中实现,或者至少部分地由外部设备(例如,计算系统)实现,该设备通过有线或无线接口与HMD通信耦合。控制器可以包括一个或多个各种类型的处理器、图像信号处理器(ISP)、图形处理单元(GPU)、编码/解码器(编解码器)和/或其他用于处理和呈现视频和/或图像的组件。控制器可以渲染包括至少部分基于从HMD上的相机和其他传感器获得的输入的虚拟内容的帧(每个帧包括左和右图像),并可以将帧提供给HMD的投影系统进行显示。
VR/AR系统可包括眼动追踪系统(也可称为注视追踪系统)。专利所描述的用于VR/AR系统的眼动追踪系统的实施方案包括至少一个眼动追踪相机(例如,红外相机),该相机设置在用户面部的每一侧,并被配置为捕获用户的眼睛图像。
例如,位于HMD显示面板边缘或附近的眼动追踪相机,从眼睛反射的红外光中捕捉用户眼睛的图像。由眼动跟踪系统捕获的图像可由控制器进行分析,以检测用户眼睛的特征(如瞳孔)、位置和运动,和/或检测有关眼睛的其他信息,如瞳孔扩张。
提供准确的眼动追踪的关键是知道用户的眼睛相对于眼动追踪相机的位置。在眼动追踪系统的一些实施方案中,为了准确确定用户的眼睛相对于眼动相机的位置,控制器可以执行一种算法,利用眼动相机捕获的图像进行3D重建,生成用户眼睛的3D模型。眼睛的3D模型表明眼睛相对于眼动仪的3D位置,这使得控制器执行的眼动仪算法能够准确地跟踪眼睛的运动。
图源:patentlyapple
苹果公司的专利图13说明了一个备选的VR/AR设备(#3000)的例子,该设备包括一个眼动追踪系统,该系统具有头部里程表(#3042),该里程表检测设备相对于用户眼睛(#3092)的运动,以及眼睛里程表(#3044),该里程表在处理由眼动追踪相机(#3040)捕获的帧之间的间隔中追踪眼睛的运动。
苹果公司的专利图11是一个眼动追踪方法的流程图,其中头部里程表用于检测HMD相对于用户眼睛的移动,眼部里程表用于追踪眼睛在处理眼动追踪相机捕获的帧之间的间隔时间内的移动。
欲了解更多细节,请查阅苹果公司授予的专利 11,307,659 。眼睛或注视点追踪技术将在苹果未来的混合现实头显中发挥重要作用。
将 向 波兰10000所学校推广VR 学习机,大朋VR与Edutech Expert和Veative达成最新合作
2022 年 4 月 19 日——虚拟现实 (VR) 设备的制造商和供应商 DPVR 最近宣布,它已与波兰的教育产品和服务提供商 Edutech Expert 以及教育产品和服务提供商 Veative 达成合作协议,基于沉浸式学习解决方案,将向波兰 10,000 多所学校推广针对教育的 VR 头显。
2021 年,波兰教育部启动了一项针对波兰小学的重大补贴计划,预算约为 2.3 亿美元。参与该计划的学校能够购买新技术,如 3D 打印机、教育机器人、VR 设备和其他高科技设备。
据 DPVR 称,这三家公司将共同开发一款名为“eduVR”的新型 VR 学习设备,这是一款专为学生设计的一体式 VR 头显,预装了 500 多个适合 6 至 12 年级的教育模块。
图源:auganix
模块将涵盖生物学、化学、数学和物理等学科,包括学习目标大纲、专注于关键概念的主动学习课程和形成性评估。
该设备还将具有一个学习管理平台,该平台提供易于使用的在线课堂和内容管理系统,使教师和管理员可以更直接地访问多种不同的资源,以监控或帮助学生取得进步。
eduVR 将使学生能够在每节课后立即测试他们的知识,帮助他们巩固学习并重新访问他们不理解的任何知识模块。然后,教师将能够查看在线学习课程的结果并调整他们的课程内容,以达到更好的教育效果。
DPVR 表示,eduVR 等解决方案将为学校提供更具协作性和互动性的学习方法,该公司认为,这将通过授予学生访问远程学习资料的权限来帮助学校降低缺勤率,与此同时,这也意味着他们将不必亲自待在教室里。
图源:auganix
Edutech Expert 的创始人兼首席执行官 Bartosz Michalak 在评论此次合作时说:“我们的使命是为波兰学校提供建议并为他们提供最好的教育解决方案。我们希望更好地改变波兰的教育体系,以便学生在完成学业并进入就业市场前做好准备。我们相信虚拟现实将成为未来的关键技术,我们希望提供工具,让教师和学生现在就可以学习如何使用虚拟现实技术。”
Michalak 还指出,Veative 的 500 多个教育模块库符合波兰课程,DPVR 的头显满足正在进行的政府补贴计划的所有需求,Edutech Expert 是该计划的合格供应商,并且已经提供了教育设备给到 1,200 多所学校。
“我们在 Veative 的目标是将课程带入生活,帮助学生更容易理解复杂的概念。为了实现这一目标,Veative 继续扩大其课件库并优化课程内容。”Veative 的 CPO 戴夫·多兰 (Dave Dolan) 说。
DPVR 副总裁 Derek Liu 也对此次合作发表评论说:“DPVR 团队非常积极地帮助 Edutech Expert ,并为这个项目定制了我们的一体式 VR 头显。虚拟现实在教育领域的需求在不断变化,作为硬件供应商,我们是少数几个可以定制硬件以满足不同需求的品牌之一,就像我们最近发布的 4G/5G 无线模块一样,能够满足集成商的需求以创建令人惊叹的最终用户解决方案始终是我们的首要任务。”
DPVR 表示,它计划在波兰各地的学校推出 eduVR 解决方案,但该解决方案也可以轻松适应不同国家以及企业的使用。
4月底发布,海外“黑科技”可以让用户在 VR 中感受到物体
一项新的技术可以让 VR 用户尽可能真实地触摸和感觉到元宇宙中的物体。
据 WALA 最新消息显示,SpinOcchio 是一种虚拟世界控制器,它将允许用户感受虚拟世界中的物体,就好像他们在现实世界中触摸它们一样,它可以利用旋转来让用户感受到物体相关表面。
MAKinteract 实验室的研究人员表示,控制器的工作原理是确定物体在皮肤上滑动或在手中滑动的方式的差异,并将这些信息与用户的视觉提示配对。
图源:foxbusiness
在他们测试了“在 VR 中如何通过不同的视觉提示感知运动和厚度的触觉真实感”后,他们能够使用控制器复制滑移。据称,控制器在此后还将提供物体的真实感觉,甚至可能允许用户在不实际握住物体的情况下感受到物体的厚度。
这是一项定位前沿的“黑科技”,一旦投入使用将大大增强虚拟世界中的沉浸感。
据悉,SpinOcchio 预计将于 在 4 月 30 日至 5 月 5 日在新奥尔良举行的 2022 ACM CHI 计算系统中的 Human Factors 会议上正式亮相,让我们拭目以待。