看日报是个好习惯
沙特阿拉伯收购Magic Leap的多数股权
(相关资料图)
据英国电讯报透露,沙特阿拉伯通过其主权财富基金PIF向Magic Leap投资了4.5亿美元。早在2018年3月,沙特阿拉伯也曾通过主权财富基金向Magic Leap投资了4亿美元。
经历最近的一次投资后,据说沙特阿拉伯已经拥有Magic Leap超过50%的股份,沙特阿拉伯应该能够任命其八名董事会成员中的4名。
主权财富基金对Magic Leap的投资可能是迪拜市在夏季公布的更大的元宇宙战略的一部分,目前Magic Leap尚未对这笔投资发表评论。
图源:Magic Leap
Magic Leap是一家传奇的AR眼镜公司,其创始人Rony Abovitz曾希望将公司打造成AR眼镜领域的苹果,并取代智能手机。它吸引了谷歌和阿里巴巴等众多投资者,募集了数十亿美元的资金。然而,由于技术发展缓慢,Magic Leap在新冠大流行期间陷入了财务困境,创始人和大约一半的员工离职,随后前微软高管佩吉·约翰逊接管了公司。
目前,Magic Leap已经全面转型B2B市场,它于今年9月推出了最新产品Magic Leap 2,售价3300美元,与微软HoloLens一样,该设备面向企业级市场以及专业用户推出。
VR可穿戴设备开发商Dolami获1亿日元融资
近日,VR 可穿戴设备开发商 Dolami 宣布完成约 1 亿日元融资。本次融资由第三方配售,包括 CyberAgent Capital、East Ventures、F Ventures、NOW、Yoshitsune Ido(Anchor Japan 前 CEO)、Yusuke Harima(Mankind Games Co., Ltd. CEO)、Yuji Wakabayashi、Hiroaki Watanabe(Photosynth 公司执行副总裁)。
Dolami 成立于 2022 年 6 月,是一家总部位于加利福尼亚州的初创公司。该公司在成立之前,于 2021 年 10 月与大阪大学合作,开始开发可穿戴设备“X MASK”。“X MASK”以面具形状捕捉用户的面部表情和嘴部动作,通过虚拟化身再现丰富的面部表情。
图源:网络
Dolami 表示:2022 年 5 月,我们申请了国际专利,预计未来将在美国销售。未来,我们将利用获得的资金加强核心成员的招募,并专注于产品开发。
面部识别技术也被安装在最新的 VR 设备中,如“PICO 4 Enterprise”、“VIVE Focus 3 Facial Tracker”和“Meta Quest Pro”。预计未来支持虚拟形象表达更丰富情感的设备数量将不断增加,面部识别技术将更加普及。
【CES2023】AR解决方案提供商MAXST将展出新的AR技术和设备
近日,韩国AR平台MAXST宣布将参加CES 2023,期间将展出AR眼镜一体化平台MAXVERSE、AR开发平台MAXST AR SDK的更新版本以及MAXST AR眼镜。
其中,MAXVERSE是一个元宇宙数据服务开发的综合性平台,免费提供空间地图构建工具,空间地图和元宇宙数据服务开发工具。
作为Unity插件式内容创作工具,它包含了XR模拟功能,用户无需亲临线下也可以开发基于真实空间的服务。它适用于XR远程呈现、导航、广告和游戏等各个领域。
AR开发平台MAXST AR SDK则更新了Space Tracker,它可扫描3D空间并使用智能手机实时创建空间地图。此外,通过该功能,AR眼镜等各类智能设备可通过物联网接口实现远程控制空间内的家电。
图源:MAXST
硬件方面,MAXST AR眼镜是一款系带型产品,具有业内最小的镜片厚度,FOV为40°,重量低于100g。用户可通过板载MAXST的传感器融合SLAM享受与现实相关的AR体验。
除了新品外,MAXST还将在CES期间与法国科技公司Wisear签署谅解备忘录并对AR智能眼镜的开发进行技术合作,双方将加速开发与人类感觉神经功能协同工作的嵌入式AR眼镜以及独特的基于脑神经信号的XR设备控制器技术。
索尼正在研究VR无线串流解决方案
索尼平台体验高级副总裁西野秀明在最近的一次采访中透露:“PS VR2一反近几年的潮流,使用了线缆,但索尼正在研究无线VR。”
当被问及PS VR2为何要采用有线解决方案时,西野表示只有有线串流才能释放PS5和PS VR2的全部潜力,不过公司也在考虑其他选择。
西 野 指出,“我们明白无线化会带来另一种体验,所以我们一直在寻找所有可能性并进行技术研究。然而,就性能而言,无线解决方案可以在多大程度上取代有线方案,这仍是一个问题。”
图源:索尼
目前Quest 2或者PICO 4等产品在无线串流方面做得越来越好,但是在图像质量、连接稳定性和延迟方面跟有线传输相比还是有一定差距。除了这一原因外,电池问题可能也是索尼仍旧选用有线连接方案的原因之一。
如果采用无线连接,那么索尼需要在VR头显中额外放置一块电池和处理器,这将会对设备的重量和成本产生负面影响。
除了串流问题, 西 野 还提到了PS VR2的内容生态问题。他表示,索尼还没有公布所有的VR游戏,更多的游戏可能会在1月初的索尼CES新闻发布会上公布。
美国陆军将在2023年使用微软军用Hololens执行任务
微软的IVAS项目,即商用Hololens的军用版本近日达成了一个新里程碑。2023年,美国陆军的士兵们将会首次在战场上佩戴这款AR头显。
从明年开始,美国陆军计划向部队提供5000台IVAS 1.0和另外5000台IVAS 1.1版本。美国陆军的士兵将在战场上使用微软的军用Hololens IVAS(综合视觉增强系统)。
这些设备将被送往作战和训练单位。美国陆军没有透露这些头显的确切使用地点或用途,其在2022年9月从微软那里得到了第一批货物。
图源:Courtney Bacon / U.S. Army
原本,该头显最早应该在2021年9月部署到战场。但由于技术问题,特别是屏幕的问题,微软一再推迟了交付。由于技术还不够完善,微软也错过了定于2022年9月的最后期限。
目前尚不清楚微软是否克服了什么技术难题,使得军用Hololens达到了美国陆军的要求。今年夏天,美国拨款国防小组委员会曾表示,即使是IVAS 1.1版本仍然面临 "重大的开发挑战"。该委员会将2023年的IVAS预算减少了3.5亿美元,从4亿美元减少到5000万美元。
微软的IVAS项目在开始时的总预算高达220亿美元,用于在10年内推出12万台设备。微软在未来几年能在多大程度上使用这一预算,直接取决于AR硬件的技术进步。
目前设备的弱点主要集中在显示技术和与设备的尺寸及重量有关的计算能力。目前的IVAS装置被集成到头盔中,而计算单元和电池则穿在身上。
IVAS系统旨在为美国士兵提供像电脑游戏中那样的视觉超能力。通过头盔,他们可以看到视野中友军和敌人的位置并识别轮廓,进入作战区域的虚拟三维地图,看透烟雾,发送微型无人机并通过头盔控制它,或通过生物识别追踪器监测他们的健康,此外该设备还集成了一个夜视装置。
多年来,微软对新的商用Hololens一直处于三缄其口的状态。最近,有传言称,微软已经基本放弃了XR硬件。然而,微软的混合现实主管最近表示,微软正在继续研究硬件,并坚持更新的前景,但他没有提及Hololens 3。
STTE基金会与Geenee AR合作为青年创业者推出AR教育计划
Success Through Technology Education(STTE)基金会和Geenee AR公司宣布推出专注于推动青年创业的增强现实(AR)教育项目Unicorn Academy。
Unicorn Academy面向对创业感到好奇并希望学习创业所需基本技能的8-12年级学生进行授课。该课程可从任何可联网的设备上访问,学生无须提供任何信息就能学习如何利用AR技术创业。
图源:Geenee AR该教育项目包含AR课程作业,使学生提高设计思维和学习品牌商业模式(如特斯拉、耐克、Instagram和TikTok等)。在整个课程中,学生将通过各种课程作业,学习在AR中创建以人为本的解决方案,并最终有机会开发基于AR的业务和相应的营销内容。
Geenee AR首席执行官Cory Grenier表示:"目前多家技术公司都在开发支持AR的眼镜,这将改变我们的在线互动和交易方式。AR软件从根本上说是基于人工智能、机器学习和3D图形的基础。这些前沿领域的技术被提炼成一个强大的AR创造者工具,逻辑上与STTE的使命一致,即结合STEAM教育来推动和加速下一代未来企业的建设 。 "
Meta推出Meta Reality MR系统,带来色彩透视、空间锚定和场景理解等功能
立体色彩透视、空间锚定和场景理解将为用户提供更真实的MR体验。
据Meta公司的产品经理Sarthak Ray表示,通过MR看到周围的世界并与之互动的能力为VR开辟了新的机会。"你可以和朋友在同一个物理房间里玩耍,或者将巨大的虚拟显示器和物理工具结合起来提升生产力体验,这也是我们向AR的长期愿景迈出的一步。"
如果VR/AR设备能够令人信服地融合物理和虚拟世界,那么MR体验是非常有效的。根据Oculus最近的一篇博文,想要为用户提供MR体验,意味着头显必须具备更多功能,而不仅仅是提供一个2D视频资料。
为了进一步致力于开发前沿的VR技术,Meta公司宣布推出Meta Reality,这是一个新的MR系统,可以让人们深入了解创造非凡体验的要素。
用于空间感知的立体色彩透视
Meta公司认识到,在提供舒适和身临其境的MR体验方面,色彩透视和立体三维技术非常重要 。
图源:Meta
Meta计算机视觉工程经理Ricardo Silveira Cabral解释说道:"Meta Quest Pro结合了2个摄像头的视角来重建真实的深度,这确保了使用色彩透视技术构建的MR体验让人感到舒适。但同时,立体纹理提示允许用户的大脑完成剩下的工作,即使在深度重建不完美或超出系统范围时也能推断出深度。"
例如,当使用透视功能时,你的大脑会了解到咖啡杯离你的手大约有多远。
Oculus Insight只能捕捉100个兴趣点来确定头显在房间里的位置,这项技术为消费者VR设备提供了一个独立的追踪系统。此后,它又进行了升级,实现了深度感应。作为比较,Meta Quest Pro在不同的照明条件下,每秒可产生高达10000个兴趣点,使用户能够实时创建改进的物理空间的3D表示。
通过这个过程,Meta能够创建一个不断更新的物理世界的三维模型。然后,人们可以使用这些数据来创建一个预测性的渲染框架,可以产生真实世界环境的图像。为了补偿渲染的延迟,通过Asynchronous TimeWarp算法,重建的图像被调整为用户的左眼和右眼视图。
根据Silveira Cabral的说法,使用彩色立体摄像头使该团队能够提供对现实世界更真实的解释。
将虚拟内容融入物理世界的场景理解
Presence Platform的场景理解组件是在Connect 2021大会上推出的。这项技术使开发人员能够创建复杂和具有场景感知的MR体验。据Meta Quest Pro的产品经理Wei Lyu表示,该公司的场景理解组件旨在帮助开发人员专注于建立他们的业务和体验。
图源:Meta
"我们将场景理解作为一个系统解决方案推出,"Lyu说道。
场景理解分为三个方面:
场景模型:由几何和语义信息组成的单一、全面、新款、系统管理的环境表示。场景模型的基本元素是锚点。每个锚点都可以连接到不同的组件上。例如,一个用户的客厅是围绕着带有语义标签的单个锚点组织的,如地板、天花板、墙壁、桌子和沙发。锚点附有简单的几何表示,包括2D边界或3D边界框。
场景捕捉:一个系统引导的流程,让用户走动并捕捉他们的房间结构和家具,以生成一个场景模型。在未来,Meta的目标是提供一个自动版本的场景捕捉,不需要人们手动捕捉他们的周围环境。
场景API:应用程序可以用来访问场景模型中的空间信息的接口,用于各种使用情况,包括内容放置、物理学、导航等。通过场景API,开发者可以使用场景模型让一个虚拟球在实际房间的物理表面上弹跳,或者让一个虚拟机器人可以在物理墙壁上伸缩。
"场景理解减少了开发者在开发过程中产生的摩擦,让他们通过实时遮挡和碰撞效果建立尽可能可信和沉浸的MR体验,"Ray补充说道。
用于虚拟对象放置的空间锚点
开发人员可以利用空间锚点轻松创造出色的MR体验,这是Meta Quest Pro平台的一项核心功能。例如,产品设计师可以使用Gravity Sketch这样的平台在整个物理空间中轻松地锚定多个三维模型,为他们的产品创造一个无缝的环境。
图源:Meta
Meta产品经理Laura Onu说道:"如果说立体色彩穿透和场景理解是让MR体验融合物理和虚拟世界的重头戏,那么我们的锚定功能则是将这一切联系在一起的连接组织。”
与场景模型一起,空间锚可以用来为各种体验和情况创造丰富的自动环境。例如,你可以创建一个与物理墙相连的虚拟门。这对那些希望将XR技术用于数字孪生、仓库自动化、甚至机器人技术企业解决方案的公司来说,将是一个巨大的进步。
就目前而言,Meta似乎更关注社交体验。"通过将场景理解与空间锚结合起来,你可以将你的MR体验与用户的环境相融合并加以调整,创造一个充满可能性的新世界," Onu说道,"你可以在自己的客厅里成为一个秘密特工,在你的房间里勾画出房屋的延伸部分并放置虚拟家具,创造物理游戏等等。"
此外,Meta还在Presence平台上增加了共享空间锚点功能。这允许用户通过与同一空间的其他用户分享自己的锚来创造本地多人游戏体验。这将允许用户和其他朋友在物理桌子上玩一个VR棋盘游戏,就像Tilt Five提供的游戏体验一样。
混合现实的成功组合
空间锚、透视和场景理解的结合可以帮助人们创造一个丰富的、互动的环境,其设计从视觉和感受来说就像真实世界。Meta Quest Pro的产品经理Avinav Pashine指出,在为用户创造一个有趣而舒适的MR环境方面,有许多权衡因素。
图源:Meta
Meta Reality的未来仍在不断发展,因为该公司通过软件更新和将在其下一代产品中提供的硬件创新正不断改进该平台。Meta Quest Pro的产品经理Silveira Cabral指出,该公司的第一个产品是Meta Reality发展过程中的重要一步。
"我们希望与开发者一起学习,因为他们建立了引人注目的体验,重新定义了VR头显的可能性。这个故事还没有完成,这只是第一页。"