VR中国每周信息汇编(2022年第41期,总第80期)

2022-12-20 14:16:51 浏览:378

本期导读

  • The Information:苹果AR/VR头显将具备腿部追踪和虹膜扫描功能

  • Quest手部追踪2.1即将更新,带来巨大性能改进 

  • Meta与Adobe建立合作,将为Quest 2/Quest Pro平台带来创造性工具和应用

  • PICO 4企业版支持面部、眼动追踪,售价900欧元

  • 虚幻引擎5全新渲染技术使VR物体更真实

  • 无需开发者创建独立演示,Meta Quest Store支持应用“先试后买”

  • NVIDIA CloudXR和Autodesk VRED现已作为AWS快速入门部署

  • 马克·扎克伯格:Meta将与微软一同打造开放的生态系统

  • Vuzix成为NSC3态势感知解决方案技术合作伙伴

  • Stability AI获1.01亿美元种子轮融资,致力元宇宙及数字媒体工具开发

     

PART1   产业动态

马克·扎克伯格:Meta将与微软一同打造开放的生态系统

在10月11日举行的Meta Connect大会中,Meta和微软宣布了一系列合作,包括在Quest系列设备中引入了微软的办公服务和游戏内容。这两家看起来有竞争关系的巨头公司,为什么能达成合作呢?科技评论人本·汤普森(Ben Thompson)对两家公司的CEO进行了采访,以下是马克·扎克伯克的主要观点:

1.对于VR行业而言,企业软件与社交软件非常不同。企业市场非常复杂,而微软很长时间以来都是这一领域的领头羊。Meta选择与微软合作,让Quest系列产品承载微软企业服务的功能。

2.VR设备将分商用和消费者用的两种价位。提供给消费者的Quest价位会在300多至500多美元,而Quest Pro将是办公用途的第一台设备,高端专业人士和知识分子可能愿意为额外的技术和服务支付1500美元甚至2000美元。因此,Meta还会持续往Quest上加技术,在专业人士使用的过程中不断优化以及降低成本。

3.历史上每一代的主要计算平台,都有一个注重合作的开放生态系统以及一个封闭集成的生态系统,如Windows与Mac,以及Android与iOS。两者没有必然的优劣,但由合作伙伴关系驱动的开放生态系统最终会成为主要的生态系统。Meta与微软的合作,不仅要打造一个开放的元宇宙和开放性的生态系统,而且要确保它能在下一代计算平台的生态系统之争中获胜。

4.其它VR公司做头显或许会更专注于个人用途,而Meta肯定是以多人场景为重点的,正如现在为了做Quest Pro面部追踪,给性能和续航等带来了很大挑战,也增加了成本。

Stability AI获1.01亿美元种子轮融资,致力元宇宙及数字媒体工具开发

根据彭博社报道,元宇宙及数字媒体工具开发公司Stability AI宣布完成1.01亿美元种子轮融资,本轮融资由Coatue Management和Lightspeed Venture Partners领投,融资完成后Stability AI估值将达到10亿美元。据悉,本轮融资将用于为更大规模的用户部署定制化的产品,同时建立Stability AI的超算能力。

Stability AI构建了可制作数字艺术的AI工具“Stable Diffusion”,可以在元宇宙中设计应用程序,也可能用于创建PowerPoint演示文稿。Stable Diffusion面向大众开源,用户可以在其代码的基础上构建与设计、电影、增强现实、视频游戏、广告甚至电子商务相关的应用程序。

据TechCrunch消息,Stability AI首席执行官Emad Mostaque毕业于牛津大学,获得数学和计算机科学硕士学位,曾在多家对冲基金担任分析师,并于2020年创立了Stability AI。

Stability AI 拥有一个在AWS中运行的集群,由4000多颗Nvidia A100 GPU组成的,用于训练包括Stable Diffusion在内的 AI 系统。Business Insider报告称,Stability AI的维护成本相当高,运营和云服务支出超过 5000 万美元。但Mostaque一再声称,该公司的研发将使其能够更有效地训练模型。

Stability AI计划通过为客户培训“私有”模型并充当通用基础设施层来赚钱。它还面向个人用户提供了平台和API服务——DreamStudio,个人用户可以通过该平台和API访问其AI模型。根据Mostaque透露给彭博社的消息,DreamStudio拥有超过150万用户,创建了超过 1.7 亿张图像,而Stable Diffusion全渠道的用户数量每天超过1000万。此外,根据 Stability AI发布的新闻稿,Stable Diffusion的开源版本已被下载超过 20 万次。

值得一提的是,Stability AI最近聘请了几位备受瞩目的员工,例如多位来自Google Brain的研究科学家、未来学家和公共演讲者Daniel Jeffries等。

除了Stable Diffusion,Stability AI表示公司还有其他可商业化的项目正在进行中,包括用于生成音频、语言、3D资产甚至视频的AI模型。其中之一是算法和工具集Dance Diffusion,可以通过输入数百小时的现有歌曲训练模型,来生成音乐片段。

投资方Coatue的GP(Genral Partner)Sri Viswanath在一份声明中表示:“Coatue相信,开源AI技术有能力释放人类的创造力并带来更广泛的商业价值。Stability AI对AI的应用超越了现阶段的绝大多数用例。我们很高兴能参与到Stability AI的发展历程中,我们期待看到世界使用Stability AI的技术带来更高的创造力。”

RealWear与柯尼卡美能达建立全新合作伙伴关系

RealWear是一家为一线产业工人提供辅助现实可穿戴解决方案的提供商,最近宣布与跨国科技公司柯尼卡美能达建立全新合作伙伴关系。此次合作将扩大柯尼卡美能达远程可视化支持工具“AIRe Link”在智能手机和平板电脑上的使用范围,以便与RealWear头显配合使用。此举标志着柯尼卡美能达作为数字化工作场所提供商迈出关键一步,从而帮助客户实现流程数字化,这是该公司智能互联办公场所产品组合的一部分。

柯尼卡美能达AIRe Link是一个远程支持应用程序,支持服务专家查看客户所见内容,并以远程可视化方式进行协助。在与RealWear合作之前,柯尼卡美能达用户可通过平板电脑或智能手机在浏览器中打开应用链接以使用该应用,如今,基于可视化解决方案,工作人员将能以虚拟方式更快解决问题。

柯尼卡美能达业务解决方案欧洲智能互联工作场所项目经理Zdenek Vrbka表示:“经验表明,大多数问题都可以通过远程可视化与智能手机相结合的方案以解决。但是,在某些情况下,智能手机占用了用户手部,这是一个问题,这就是为什么我们决定与RealWear合作的原因,这将为我们的产品添加免提应用程序。”

将AIRe Link平台扩展到头戴式可穿戴设备,柯尼卡美能达客户将能免提操作获得远程可视化服务(AIRe Link应用可从RealWear Cloud下载)。

柯尼卡美能达表示,自2020年AIRe Link首次部署以来,目前已有6000多名技术专家在使用该解决方案,并正在为数千名客户和一线专业人士提供支持。其中40%为外部客户,业务遍及了从能源和公用事业到科学研究等一系列行业。

RealWear EMEA副总裁Jon Arnold表示:“在RealWear,我们明白减少响应时间、不必要的客户访问和提高首次修复率的重要性,随着RealWear Navigator 500兼容AIRe Link应用,现在,客户将能获得更便捷的实时技术支持服务。”

 

PART2   硬件追踪

可与XR设备兼容,Tap Systems宣布“TapXR”腕戴式手指键入器

Tap Systems是一家专为控制增强、虚拟和混合现实(AR/VR/MR)系统而设计的设备供应商,该公司最近宣布了旗下全新“TapXR”可穿戴键盘和控制器。

TapXR腕戴式设备支持用户键入、输入命令和导航菜单。Tap Systems称,TapXR可实现快速、准确的控制,并能与包括手机、平板电脑、智能电视以及VR/AR头显在内任何支持蓝牙的设备兼容,TapXR的工作原理是感知用户在表面质地的手指敲击,并将其解码为数字信号。

Tap Systems表示,虽然传统手势有时会很慢、容易出错,但手指敲击却快速、准确,并且不会导致视觉或手指疲劳。Tap Systems称,Tap用户的单手打字速度已能达到每分钟70多个单词,尽管手部追踪支持的手势相对较少且没有触觉反馈,可是TapXR拥有超过100条独特的命令,且支持触觉反馈,这使得其成为了提高与AR/VR设备一起使用时的速度和准确性的理想选择。

Tap Systems首席执行官Dovid Schick表示:“TapXR解决了AR/VR/MR大规模采用的关键问题。迄今为止,用户还无法舒适与这些头显进行交互,而我们的用户则能更快键入、选择菜单并进行触感反馈操作,这将使XR技术能更广泛应用于生产力、商业和元宇宙等领域。”

据悉,TapXR特性包括:

全键盘模拟;

99%及以上的准确率;

10小时续航,14天待机;

兼容任何表面质地;

可与蓝牙设备配对;

支持6Dof手部和手指追踪;

超过100个可定制命令;

开源SDK;

两种尺寸,适合大部分用户。

此外,TapXR完全可编程和完全可定制,支持用户创建、共享和保存宏、热键和预设。

苹果VR手套暗示了「Reality Pro」头显配件

长期以来,关于苹果将推出AR/VR头显的消息不绝于耳,今年8月,彭博社报道,苹果正在申请「Reality One」、「Reality Pro」、「Reality Processor」等AR/VR头显商标,彭博社对此评论“这是苹果多年来推动其第一个新类别产品的一部分”。

如今,随着时间推移,越来越多的苹果专利曝光证明了这家总部位于库比蒂诺的科技公司并不会止步于此,除了头显,其还将发布与头显配套的附件生态系统产品。

其中,将有可能问世的是支持手指和手部追踪的VR触感手套,该手套将支持苹果“Reality”头显用户畅游苹果品牌元宇宙、并在其中发挥充当双手的能效,目前,OEM的概念基于“惯性测量单元”(或IMU),该模块可以结合陀螺仪和加速度计等传感器来跟踪和映射手部以用于VR追踪目的。

为了实现这一目标,IMU被策略性分布于手套内,以测量四肢骨骼之间的距离及其关节运动,这将有利于在VR环境中以精细细节再现手部及其运动。

值得一提的是,10月18日,中国国家知识产权局(CNIPA)授权了一套虚拟手套专利申请,该手套可能与苹果头戴设备配套,这可能表明,除了游戏等应用,苹果打算将其第一代AR/VR头显与真正的“专业”应用程序相兼容,不过,话又说回来,要促成附件生态系统还有很长的路要走。

知名数码品牌Soundcore针对Quest 2推出无线VR耳机

近日,知名数码周边品牌安克旗下的高端音频设备品牌Soundcore宣布推出兼容Meta Quest 2的无线VR耳机VR P10。该产品配备11毫米驱动芯片及Soundcore BassUp技术,可通过5.2/2.4GHz高速蓝牙连接提供清晰、纯净的音频效果。“我们很高兴VR P10将成为第一款获得‘Made For Meta’认证的音频产品,”安客创新创始人兼CEO阳萌在其官方声明中表示,“这款全新的低延迟耳机将成为Quest 2用户的完美游戏配件。”

具体而言,Soundcore LightningSync无线技术将音频延迟降低到30毫秒,以保证头显和耳机之间的低延迟连接。这对于用户来说很重要,因为即使是视觉和音频之间最轻微的错位也会极大影响其沉浸体验质量。

VR P10具有4个带有波束成形功能的内置麦克风,可最大限度减少不必要的背景噪音。在续航方面,VR P10一次充电可持续使用约6小时(带充电盒则为24小时)。直通充电允许用户在使用加密狗时通过位于设备外部的USB-C端口为其充电,同时为Quest 2充电。

以下是VR P10具体的功能特点:

低于30毫秒的低延迟游戏体验

2.4GHz高速无线连接

用于快速无损音频传输的LC3编解码器

蓝牙和加密狗同时连接

带有11毫米驱动器及BassUp™️音效

直充无限播放时间

VR P10与iOS/安卓移动设备、PC、市面流行的游戏主机以及Quest 2通过加密狗进行兼容,此外用户还可以将多个加密狗连接到多款设备,并使用Soundcore应用程序在多款设备之间切换。

目前VR P10可通过亚马逊、Soundcore.com及Meta在线商店以99.99美元的价格进行购买,产品包含VR P10耳机、USB-C加密狗、充电盒、S/M/L耳塞及USB-C 数据线,而额外使用的加密狗将于11月中旬上线亚马逊、Soundcore.com,售价14.99美元。

惠普是否会停产Reverb G2并退出VR市场?

惠普Reverb G2正在大幅打折,有传言称该头显将于明年停产。

惠普Reverb G2支持微软“Windows MR”PC VR平台,尽管声称具备MR功能但所有PC WMR头显都仅限于VR,不过,该类头显与大多数SteamVR内容兼容,目前,微软商店只有少数VR游戏和应用,虽然微软在Steam上发布了PC VR内容,但微软和惠普的新声明使人们对PC WMR头显的未来充满疑虑。

惠普表示:“惠普扩展现实(XR)团队的工作带来了令人兴奋的创新,我们将继续创造更加身临其境的体验,从始至终客户是我们战略的核心,我们将继续改进产品,以更好满足客户需求。”

这是惠普对是否停止生产Reverb G2以及该公司是否仍对VR感兴趣质疑的回应,我们还询问了微软,现有客户是否还期待对该平台未来的支持。

微软表示:“微软支持包括惠普Reverb G2在内的各种Windows MR设备,该平台旨在提供客户喜欢的体验,支持通过SteamVR推出的热门游戏,同时支持最广泛的设备生态系统,以取悦我们的客户。”

一位6年reddit老用户声称,惠普的一位代表表示,惠普将在明年结束Reverb G2的生产,退出VR市场,我们通常不会报道这类谣言,但间接证据表明此消息可能有一定的真实性,这就是为什么我们联系了惠普及微软以了解情况的背景。

但是,这两份声明都没有阐明我们的核心问题,微软表示WMR仍处于“积极”开发阶段,但究竟这意味着什么还有待观察。

尽管其他Windows MR头显有时售价低至200美元,但都未能得到广泛采用。Steam硬件调查显示,9月只有5%的SteamVR用户使用Windows MR头显,而使用Meta头显的用户为64%,使用Valve Index头显的用户也有17%。

我们回顾了惠普Reverb G2首次推出时的情形,我们对于Reverb G2的舒适性、音频和清晰度印象深刻,但也发现了手柄跟踪和人体工程学缺乏。对于模拟器而言,这是一款理想的头显,但对于房间规模的游戏来说,其并不能与Meta Quest 2或Valve Index匹敌。

Quest 2能够在独立模式或PC VR模式下运行,尽管它不如Reverb G2舒适,分辨率也较低,但这并不能阻碍Quest 2成为消费者首选头显。

惠普前虚拟现实部门全球主管,负责推出Reverb和Reverb G2的Joanna Popper于今年早些时候离开了惠普。Popper是惠普VR的代言人,然而,近几个月来,我们还没有看到任何其他惠普高层公开倡导VR。

除了Reverb G2,惠普还面向企业出售售价1250美元的Reverb G2 Omnicept型号,该头显支持面部跟踪和眼动追踪,但这些功能在Meta Quest Pro中可用,另外,作为HTC Vive Focus 3的附加组件,以及即将推出的PICO 4企业版 (注意这些头显均是VR一体机并定期进行软件更新以改善功能),Reverb G2 Omnicept并没有优势可言。

如今,VR硬件市场竞争愈加激烈,惠普依靠微软作为其软件合作伙伴,但微软多年来没有大幅更新WMR,而是转向与Meta合作,将Windows和Office带到Quest。

就在上周Meta Connect召开之前,惠普在美国市场将Reverb G2从600美元大幅打折至350美元,这是符合市场行情的真实报价,还是一次大甩卖?

松下公布MeganeX VR头显最新原型

松下品牌Shiftall公布了MeganeX VR头显最新原型,除了更新设计,松下还展示了SteamVR 追踪模块,为头显添加了精确追踪,以及对Valve Index手柄的支持。该公司表示,这款头显将在AWE Europe 2022大会上展示最新设计,尽管MeganeX似乎不是一体机,而是专为 PC VR打造。

虽然“Shiftall MeganeX VR” 名称可能不起眼,但它确实是一款看起来很有型的VR头显,其具有良好的SteamVR兼容性、inside-out/outside-in追踪、单眼高分辨率2560 × 2560 (6.5MP) 、据称支持HDR的120Hz显示屏——所有这些都包含在紧凑外形中......毫无疑问,这是这款PCVR头显令人印象深刻的特征。

只有时间才能证明这款头显是否真的令人惊艳,随着松下公布 MeganeX头显的最新原型,包括首次展示安装在头显顶部的SteamVR追踪模块,Shiftall表示,这将支持头显可选采用外部追踪,以替代outside-in追踪解决方案。

Shiftall还表示,SteamVR追踪模块的最终设计将具有覆盖传感器,外观更简洁:

另外,Shiftall还确认头显将包括一个适配器,该适配器不仅可以连接SteamVR追踪模块,还可增加对Valve Index手柄的支持。鉴于SteamVR生态系统的互操作性,预计这意味着任何可以连接到标准SteamVR适配器的物体也可以与头显配合使用(例如Vive wands或 Tundra追踪器)。

不过,奇怪的是,在Shiftall MeganeX首次发布时,Shiftall表示由于添加了Snapdragon XR1芯片,该头显可用作VR一体机。然而,我们在头显上发现的最新信息并未提及独立功能,而是指出这是一款纯粹的PCVR头显。

PSVR2产品手册提前曝光:重560克,和手柄打包卖

PSVR2产品将在明年推出,但官方说明手册已经提前印刷出来啦。在Twitter上分享的手册照片中,可以看到年份为2023年的版权声明和一些关于产品规格的小细节。正如虚拟现实狂热者布拉德·林奇(Brad Lynch)所说,看起来索尼已经降低了头显的整体重量,开发机的重量为630克,最终产品的重量仅为560克,整整减轻了70克。这是一个巨大且非常令人欣喜的进步!

根据参数信息,PS VR2的单眼分辨率达到了2000*4000,且视场角也提升到了110度,配合新增的眼球追踪系统,它能够让用户获得更为出色的沉浸感。

除此之外,它显示了 PSVR2 头显如何使用正面的单个 USB-C 端口连接到 PS5 主机。它还提到了PSVR2的Sense手柄。尽管大家都猜到了,但手册也证实了PSVR2和手柄将捆绑售卖。

不管怎么说,最令人兴奋的事情是,我们可以看到PSVR2已经接近发布了。索尼看样子已经在准备库存了。据报道,索尼在发布时可能会卖出多达200万个头显,考虑到PS5当前的市场保有量,200万其实不算多。

 

PART3   技术速递

Vuzix成为NSC3态势感知解决方案技术合作伙伴

美国AR光器件解决方案商Vuzix宣布,与芬兰态势感知、安全媒体和数据管理市场解决方案商NSION达成合作,成为NSION旗下NSC3无缝态势感知解决方案技术合作伙伴。

NSC3解决方案主要面向国防部、安全客户和急救人员,但也可应用于包括企业和医疗保健在内的NSION新市场。

NSION称,其NSC3系统通过将无人机、电话、汽车和其他来源的实时视频流式传输和存储到指挥控制室以及现场移动设备,有助于提高关键任务操作的效率。即使在复杂条件下,NSC3也能通过智能数据算法从视频或数据馈送中搜索威胁和异常。

不仅如此,NSION NSC3平台可从包括数据和高清视频等多个来源获取实时媒体流,以供团队成员之间共享,并显示在Vuzix智能眼镜上,以实现平视和免提态势感知。目前,Vuzix和NSION正在联合演示该解决方案。

NSION北美总监Brett Johnson表示:“NSION对与Vuzix达成的新关系感到兴奋,因为Vuzix智能眼镜可与NSION视频广播和管理平台相结合,并能应用于多场合及服务于多个垂直市场。”

Vuzix总裁兼首席执行官Paul Travers表示:“我们的智能眼镜将继续集成到诸如NSC3这般性能强大的下一代系统,很高兴能与NSION合作,以帮助更多客户和机构广泛采用NSC3平台。”

NVIDIA CloudXR和Autodesk VRED现已作为AWS快速入门部署

英伟达和欧特克宣布,NVIDIA CloudXR和Autodesk VRED解决方案现已在亚马逊网络服务(AWS)上作为“快速入门”部署提供,两家公司致力于使逼真的沉浸式体验更易于访问。

根据英伟达说法,现在所有用户都可以在任何位置部署CloudXR和VRED,以实现高保真、沉浸式XR体验。

Autodesk VRED是一款3D产品可视化软件,使用户能够创建产品演示文稿和设计评审,并实时可视化虚拟原型;而NVIDIA CloudXR基于NVIDIA RTX技术构建,可跨5G和Wi-Fi网络上提供高质量、身临其境体验。

现在,以上两大解决方案可在AWS快速入门中访问,该快速入门是由 AWS 构建的自动化参考部署,可帮助用户快速部署热门技术。通过整合两家公司技术,VRED设计专业人士可以采用基于NVIDIA CloudXR和NVIDIA RTX GPU提供支持的沉浸式XR以及NVIDIA RTX虚拟工作站(vWS)软件。

目前,许多专业设计师(包括汽车制造商)在其设计工作流程中应用Autodesk VRED,借助 CloudXR,Autodesk VRED用户可以进入逼真的沉浸式环境,并与大型3D模型和场景无缝交互。

英伟达表示,设计人员所需的大量3D数据集可以与一体式头戴设备一起使用,因为这些数据通过NVIDIA RTX GPU 从 AWS 云与CloudXR一起流式传输, 值得一提的是,NVIDIA CloudXR 软件开发工具包附带服务器组件安装程序和开源客户端应用程序,适用于将XR内容从OpenVR应用流式传输到安卓、iOS和Windows的移动设备。

The Information:苹果AR/VR头显将具备腿部追踪和虹膜扫描功能

苹果即将推出的AR/VR头显将具备腿部追踪和虹膜扫描功能。

去年,彭博社、The Information和供应链分析师郭明錤报道称,苹果正准备发布一款AR/VR高级头显,该头显具有超高分辨率彩色透视功能,郭声称这款头显将明显比现有VR头显更轻,并配备双4K OLED微型显示器。

今年8月,一家与苹果相关的公司申请了“Reality One”、“Reality Pro”和“Reality Processor”商标,暗示头显及其处理器将被命名为“Apple Reality”。

根据新报道,虹膜扫描将用于解锁设备和验证付款,这意味着将会支持多个用户配置文件而无需密码。

而支持腿部追踪也表明头显显然还拥有两个向下的摄像头以追踪腿部,长期以来,Meta因其无腿虚拟化身而遭受广泛嘲笑,今年Connect活动上,Meta推出了虚拟化身腿部预览演示,其中包括了 “从动作捕捉创建的动画”,不过,售价1499美元的Meta Quest Pro可追踪用户头部、眼部、面部表情和手部,还不支持追踪用户身体或腿部。

今年5月,The Information还发布了一份关于苹果AR/VR头显项目陷入困境的报道,报道表示该头显共有包括用于透视、位置追踪、眼部追踪、面部跟踪、手部跟踪及身体追踪在内的共计14个摄像头,而数量众多的摄像头让硬件和算法工程师感到“头疼”。据报道,苹果AR/VR头显的一个特点是前屏幕,可让房间里的其他人看到用户脸部上半边和眼睛,但加入这块屏幕显然让相机透视功能的开发更加困难,值得一提的是,硬件开发计划有时甚至会在产品规划的后期发生变化,例如Quest Pro在发布前几个月就放弃了深度传感器。

该报道还声称苹果“几乎从不”在内部演示中提及游戏,并且没有开发追踪控制器,输入方法为手部跟踪和苹果专利申请中出现的“clothespin-like finger clip”。

The Information此前报道称,苹果正在考虑将AR/VR头显定价为3000美元,但也表示,苹果也在努力降低材料成本,使其更实惠,如果到目前为止的报道可信,那么苹果AR/VR头显将拥有比Quest Pro更高的分辨率、更强大的处理器、更纤薄的设计。

郭明錤预计苹果将在明年1月举办一场媒体活动,2-4周后交付开发套件,并在2023年第二季度推出预购,以便在WWDC 2023之前发布。

Quest手部追踪2.1即将更新,带来巨大性能改进

Meta Quest 2手部追踪正获得另一项重大质量更新。

Quest 2手部追踪 2.0于今年5月发布,为手部追踪功能带来了巨大改进。Meta表示,研究人员和工程师“开发了一种应用深度学习的新方法,以便在设备的摄像头无法看到整只手或手快速移动时更好理解手部姿势”,并将结果描述为“追踪功能的连续阶梯函数改进”。

在理想照明条件下,手部追踪2.0可以处理用户手部快速移动、一手覆盖另一只手,甚至手接触场景——以往这会导致追踪暂时中断,而2.0追踪使手部追踪功能更加实用,并支持用户拍手和数手指等新动作。这是一个可选的开发者端升级,因为一些较旧的应用程序使用开发者制作的手部追踪质量过滤算法来处理1.0的问题,但几乎所有手部追踪游戏,包括Cubism、Unplugged: Air Guitar及Hand Physics Lab都支持这一功能。

Meta表示,即将发布的手部追踪2.1包含了“对整个追踪堆栈的改变,这将进一步提高追踪可靠性”。

另外,追踪质量损失在2.1版本明显减少,这意味着用户手部追踪不会频繁性暂时失去追踪,并且重新追踪连接将更快,因此,即使追踪系统失去对手部的追踪,手部追踪也会很快获得支持。

此外,2.1增加了新的神经网络以提高预测准确性,Meta声称这提供了“更少的超调和更平滑的手部姿势”,特别是在快速运动时,所有VR跟踪系统都采用预测以解释用户头部和手部在每帧开始渲染到实际显示之间的轻微移动。

最后,2.1提高了跨Quest系统界面使用的捏合手势的可靠性,Meta称这减少了错误检测。

据悉,手部追踪2.1版本将于今年晚些时候以Quest系统版本更新的形式同步更新于Quest 2和Quest Pro。

Meta与Adobe建立合作,将为Quest 2/Quest Pro平台带来创造性工具和应用

Meta Connect 2022期间,Meta宣布与Adobe建立合作伙伴关系,将为Quest 2和Quest Pro平台带来创造性工具和应用。

虽然Quest Pro是当天最耀眼的明星,但Connect主题演讲还展示了与科技行业一些最大公司的几项新合作关系,

扎克伯格表示,Meta现正与包括微软和雷朋在内的“十几个合作伙伴”合作,为Quest生态系统带来新的工具,其中,微软是重要的合作伙伴,将为Quest平台引入包括Office套件、Xbox云游戏、Windows 11在内的丰富微软工具。

另外,扎克伯格还宣布与Adobe合作,将Adobe旗下应用和工具引入Quest生态系统。

“明年,[Adobe]将面向专业3D创作者、设计师和艺术家发布一套应用程序(支持Quest)。”扎克伯格在主题演讲中说,这包括了Adobe Substance3D Modeler,这套应用目前处于Windows和PC VR测试阶段。

值得注意的是,该软件最初为Oculus Medium,一款PCVR雕刻工具,之后被Adobe收购并于去年更名为Substance 3D Modeler。现在,这一新合作伙伴关系将使该工具首次进入Meta Quest平台,据说明年将在Quest 2和Quest Pro平台推出,支持用户使用Touch手柄在VR中建模和查看3D对象。

此外,标准PDF阅读和编辑软件Adobe Acrobat现已登陆Quest Store。

Meta Quest头显可通过“共享空间锚”获得托管功能支持

Meta Quest头显正在获得对托管(Colocation)功能的支持。

“托管功能”指的是使用同一虚拟坐标空间共享同一物理游戏空间的多个头显,Facebook在2018年底展示了一个“竞技场规模”的原型,但从那以后就没有进一步的进展。

HTC Vive Focus 3自去年以来开始支持定位,并且已经在VR线下店中使用。另外,托管对于混合现实应用应该特别有用,以便每个人都能在房间的相同位置看到相同的虚拟对象。

根据对该技术的描述,托管工作原理可能与苹果ARKit和谷歌ARCore已存在的托管功能类似,Inside-out追踪会在房间内生成静态特征的点云,算法在多个设备的点云中查找共享的独特模式,并使用它们来对齐虚拟空间,该过程不需要外部传感器、基站或特定标记。

需要明确的是,这是一项开发者端功能,被称为共享空间锚,是现有空间锚功能的扩展,可支持用户将虚拟内容放置在房间中的特定位置,以便用户下次使用该应用程序时将其保留在锚点。

虚幻引擎5全新渲染技术使VR物体更真实

虚幻引擎5推出了两大全新关键功能,这将从根本上提高3D几何和照明的真实感。虽然这些功能尚未针对VR进行完全优化,但早期开发者实验显示出了令人印象深刻的结果。

虚幻引擎5于今年早些时候发布,但彼时这两个功能——用于全局照明的Lumen和用于微几何体的Nanite——并不支持VR。

Epic一直在开发虚幻引擎5的后续版本,尽管还没有准备好完整发布,但虚幻引擎5.1和5.2预览版本表明,Lumen和Nanite已经获得了对VR的初步支持。

虽然在全面优化VR头显所需的性能水平方面仍有可能取得进展,但开发者已开始在VR模式下尝试Lumen和Nanite,并取得了惊人的结果。

其中一个例子来自Twitter用户Hiroyan,他置身于一个充满未知的洞穴,只能通过手电筒照明探索……

虽然许多Lumen演示都专注于展示发光物体和高反射表面(作为Lumen实际作用的一个明显例子),但从现实主义角度来看,对于该技术的微妙采用更具有说服力。

真正让这个场景脱颖而出的是高度详细的几何体和照明之间的相互作用,VR确实受益于更详细的几何体,不仅因为立体视图在小的几何细节实际上是伪造的(使用法线贴图等技巧)、且很容易被察觉,而且还因为当你玩VR游戏时,可以更容易接近物体。

至于Nanite——其本质上就像一个连续的LOD系统,从原始的“主”3D模型中提取细节——岩石和木材的微小表面细节确实非常突出,特别是因为它们在立体深度方面是真实的。

基于这一点,Lumen照明系统能够正确捕捉到所有这些小的表面细节,并以一种非常令人信服的方式照射其中,这种方式也巧妙照亮了场景的其余部分,而不是为了演示目的将反射推到不切实际的水平。

“这很难通过屏幕截图传达,但当你能够近距离接触物体并且能够看到微观细节时,这种感觉真的太棒了。”Hiroyan表示。

不过,值得一提的是,尽管该细节水平能够符合基本的PCVR内容需求,但很可能在一段时间内不会实现,Hiroyan指出,该演示基于NVIDIA RTX 3090运行,这是英伟达制造的高端GPU之一。

 

PART4   应用速递

NauticEd与MarineVerse合作,带来VR帆船训练课程

美国水上和在线帆船培训商NauticEd与澳大利亚VR帆船模拟解决方案商MarineVerse建立合作伙伴关系,共同提供基于VR游戏与帆船训练技术和软件相结合的VR帆船课程。

据悉,VR帆船课程“Self Mastery”由两家公司共同开发,该课程以帆船训练为特色,旨在打造逼真、娱乐的沉浸式虚拟帆船航海体验。

通过培训,学员将能掌握驾驶帆船、控制和导航及修帆技能,并及时根据训练模块获得训练数据,两家公司透露,其他更复杂的模块,如码头内的停靠和机动、夜间航行和恶劣天气正在开发中。

NauticEd创始人兼全球教育总监Grant Headifen表示:“基于VR帆船课程,帆船爱好者和水手将不再畏惧大海,此种全新帆船训练将是革命性的,正如经验丰富的水手所明白的真理,实践才能掌握技能和真理,显然,VR帆船课程集成了传统帆船训练所需的一切,从而使学员能在安全的环境中不断突破自我。”

NauticEd认为,公司已认识到基于VR独特功能和MarineVerse创新以增强和改变帆船教学的契机,而MarineVerse则希望融入现代航海教育发展,并将其作为愿景一部分,以使帆船运动更容易更有趣;同时,NauticEd还指出,新宣布的合作伙伴关系恰逢公司注册用户高速增长期,过去24个月公司在线帆船课程注册人数增长了43%。

除了NauticEd帆船教育和认证,此次合作还将提供“MarineVerse Cup VR”完整体验,这是一款Meta Quest VR帆船游戏,致力于使玩家无需培训即能操纵帆船以及驰骋赛场。

谷歌Starline项目开启测试,为企业伙伴带来光场视频通话

谷歌Starline项目是一个沉浸式视频聊天实验系统,旨在缩小人与人之间的距离,而无需AR或VR头显。在谷歌年度Cloud Next会议上,该公司宣布将向选定的企业合作伙伴推出该系统。

谷歌一篇博文表示,Starline项目将于今年开始早期使用,原型将安装在Salesforce、WeWork、T-Mobile及Hackensack Meridian Health的办公室。

Starline系统凭借其传感器、光场显示、空间音频、计算机视觉和新颖的压缩功能,提供了无头显3D聊天体验,并使网络体验成为可能。最终的效果是,用户可以与其他人进行包括眼神交流在内的面对面对话。

自2021年底以来,Starline原型已在美国各地的谷歌办公室中应用,该公司表示,与传统视频通话解决方案相比,此原型可提高员工存在感、注意力和生产力。自那以后,谷歌指出,已向媒体,医疗保健和零售等领域的100家企业合作伙伴展示了这项技术。

Starline产品管理总监Andrew Nartker表示:“当我们与企业合作伙伴一起构建混合工作的未来时,我们期待看到Starline项目帮助员工彼此建立牢固协作、医生与患者建立良好医患关系,销售人员与客户建立更深层次的联系;无论你是在做演示报告还是坐下来喝咖啡聊天,我们都希望Starline的体验是自然的,就好像对方与你同在一个房间里一样,更广泛说,我们渴望员工在远程合作时时刻精力充沛和富有成效。”

谷歌透露,公司将在明年某个时候分享更多关于Starline抢先体验计划的信息。

 

PART5   游戏资讯

无需开发者创建独立演示,Meta Quest Store支持应用“先试后买”

Meta宣布,与创建和维护独立的演示应用相比,现在,开发者将能基于免费的限时应用试用机制以让用户快速了解旗下应用,Meta希望这将提高用户转化率,同时为开发者提供更简单的推广途径。

VR应用可能比传统游戏更难销售,因为VR体验并不总是能够通过屏幕截图和视频有效传达,为了给开发者创造更好的销售方式,Meta面向开发者宣布了产品限时试用系统,以助力开发者推销应用。

这个被Meta称为“先试后买”的系统看起来相当巧妙,根据该系统,开发者将能为旗下应用设置15-30分钟试用时间,在试用结束前5分钟,用户将会收到试用即将结束提示,以提醒用户立即购买,而在试用结束后购买了应用的用户将能继续包括所获成就在内的现有内容进度。

Meta表示,开发者可以选择在Quest Store进行计时测试,而无需对应用代码进行更改,兑换试用版的用户将拥有30天试用期。

传统的应用演示往往基于单独“演示”版本,通常旨在让用户深入了解,同时用扣人心弦的结局或彩蛋以吸引用户,但完整版本演示并非总能带来高转化率,因此,并不是所有版本应用都能与Meta系统提供的15到30分钟试用时间相匹配。

鉴于此,Meta“先试后买”添加了相应功能以帮助开发者弄清楚该系统是否真的适合。开发人员可以在有或没有限时试用系统的情况下对应用进行A/B测试,然后,仪表板会比较体验试用和未体验试用用户之间的转化率。

除了有机会获得比典型演示版更高的转化率,“先试后买”系统肯定比独立的演示应用更容易管理。后者是该应用程序的单独版本,具有专门用于让玩家体验游戏的自定义游戏流程,这需要额外的时间来构建和维护,通常会导致演示成为主应用程序的旧版本。

据我们所知,“先试后买”与Quest Store现有退款政策共存,该政策支持玩家退款(体验时间小于2小时、且购买时间不超过14天),另一方面,“先试后买”对消费者作用更加明显,Meta表示甚至会在商店中创建一个独立版块,以突出支持试用系统的VR应用。

 

PART6   会议

第二十二届中国虚拟现实大会正式启动!

第二十二届中国虚拟现实大会(ChinaVR 2022)将于2022年11月18-20日在云南昆明举行。ChinaVR是国内顶级的虚拟现实领域学术会议,将共同探讨虚拟现实前沿科技进展、关键技术创新与展望、产业技术开发与推广应用等话题。ChinaVR 2022 将邀请包括院士、杰青、长江学者、行业技术专家等在内的国内外虚拟现实领域的专家学者,为参会者带来高水准特邀报告、主题论坛及年度进展报告、学术论文交流报告、会前课程、VR之夜、博士生论坛、大咖面对面、墙报与演示等内容,同期将举办2022年中国虚拟现实大赛(CCVR 2022)决赛,以及2022年国际虚拟现实与可视化会议(ICVRV 2022)。现向广大科研工作者公开征集原创性的高质量学术论文,欢迎从事虚拟现实以及相关领域研究的专家、学者、学生,以及工业界的专家、技术人员、工程师等踊跃投稿与参加!

主办单位:中国仿真学会、中国图象图形学会、中国计算机学会

承办单位:北京航空航天大学云南创新研究院、云南大学、云南艺术学院、昆明理工大学

协办单位:中国仿真学会虚拟技术及应用专业委员会、中国图象图形学学会虚拟现实专业委员会、中国计算机学会虚拟现实与可视化技术专业委员会

支持单位:虚拟现实技术与系统国家重点实验室(北京航空航天大学)、北京市混合现实与新型显示工程技术研究中心(北京理工大学)、计算机辅助设计与图形学国家重点实验室(浙江大学)、文旅部闽台非遗文化数字化保护与智能处理文化和旅游部重点实验室(厦门大学)、云南省人工智能重点实验室(昆明理工大学)

重要日期:

投稿截止:2022年9月10日

注册开通:2022年9月15日

论文录用:2022年9月30日

终稿截止:2022年10月15日

会议召开:2022年11月18-20日

会议网址:http://chinavr2022.aconf.cn/

码获取更多信息

2022世界VR产业大会

当今世界,新一轮科技革命和产业变革蓬勃发展。虚拟现实是新一轮科技革命的代表性技术,伴随5G商用加速到来和“元宇宙”概念的兴起,将成为驱动数字经济发展和产业转型升级的关键技术,深刻改变人类生产生活方式。大力发展虚拟现实,已是许多国家和地区的共同选择。

我国经济进入高质量发展新阶段,正在加速形成新发展格局。虚拟现实跨界融合了诸多前沿技术,拓展了人类的感知能力,改变了产品形态和服务模式,既是满足人们对美好生活向往的重要介质,也是构建新发展格局的生力军。

江西地处中国中部,拥有变革创新的基因和开放发展的美好愿望。在综合判断全球技术变革大势和我国、江西发展需求的基础上,决定将虚拟现实作为发展新经济、培育新动能的重要突破口,通过搭建世界VR产业大会平台,推动产业国际交流,重塑江西产业发展格局,加快实现高质量跨越式发展。

2022世界VR产业大会定于2022年11月12日—13日在江西南昌市举行。

主办单位:工业和信息化部 江西省政府

承办单位:中国电子信息发展研究院 江西省工业和信息化厅 南昌市人民政府 虚拟现实产业联盟

时间:2022年11月12日-13日,会期2天

地点:江西省南昌市

线下主会场:南昌国际博览城绿地铂瑞酒店

线上主会场:元宇宙平台

大会活动:

包括开幕式和主旨演讲,多场高峰论坛、主题论坛、企业生态论坛,多场次产业对接、会议体验等系列活动,线下线上同步进行,适当引入VR/AR、AI、新型显示等技术,创新会议举办和直播形式,通过主流媒体平台、社交网络向全球实时发布。

大会宗旨:

大会秉承“国际化、专业化、品牌化、大众化”的办会宗旨,树立“VR让世界更精彩,江西让VR更出彩”的大会品牌,按照“在不变中巩固优势、在变化中创新特色,全力打造3.0版本世界VR产业大会”的总体要求,聚焦虚拟现实发展的关键共性问题,探讨产业发展趋势和解决之道,展示虚拟现实领域最新成果、前沿技术和最新产品,推动行业应用和消费普及,搭建虚拟现实的创新合作平台、国际交流平台和成果展示平台,汇聚全球要素资源,切实把2022世界VR产业大会办成全球VR/AR/MR领域规格最高、规模最大、影响力最强的顶级峰会。

大会日程:

 

 


欢迎您的宝贵建议和投稿!

联系方式:

端木海婴:18802154333(同微信)

杨     辉:13970929926(同微信)

刘 向 群:18101039058(同微信)

邮       箱:technews@chinavr.org


联合出品:

中国计算机学会虚拟现实与可视化专委会(CCF-TCVRV)

中国图象图形学学会虚拟现实专委会(CSIG-VR)

中国仿真学会虚拟技术及应用专委会(CSF-VTA)

中国电子学会虚拟现实分会(CIE-VR)

本期信息来源:以上信息来自未来科技全接触、93913、中国人工智能学会、中国仿真学会、中国计算机学会、中国图象图形学学会等综合整理

格式编辑:小艾