VR中国每周信息汇编(2022年第38期,总第77期)

2022-12-19 16:41:53 浏览:308

本期导读

  • 支持生成VR/AR数媒内容,Peel 3D推出全新3D扫描仪

  • 轻松发布Web AR内容,Blippar WebAR SDK已集成至Unity

  • 欧拓飞推出6DoF VR/AR头显测试系统“Buddy”

  • 向企业提供元宇宙工作平台,Spot完成550万美元种子轮融资

  • 虚幻引擎5.1版本Nanite和Lumen系统现将正式支持PC VR内容

  • 面向工业元宇宙,英伟达推出NVIDIA Omniverse Cloud

  • 高通、英特尔和Meta旨在AR/VR应用与雷达共存

  • 打造半沉浸光场显示屏,MIT衍生企业Brelyon获1500万美元A轮融资

  • 用AR协助店内员工,Lowe's与英伟达、Magic Leap合作创建数字孪生应用

  • 英伟达发布下一代GeForce显卡——RTX 4080/RTX 4090

     

PART1   产业动态

面向工业元宇宙,英伟达推出NVIDIA Omniverse Cloud

英伟达推出了NVIDIA Omniverse Cloud(由Omniverse Nucleus Cloud 、Omniverse App Streaming 、Omniverse Replicator、Omniverse Farm、NVIDIA Isaac Sim、NVIDIA DRIVE Sim 组成),这是一套全面云服务套件,面向艺术家、开发者和企业团队提供设计、发布、运营和随时随地体验元宇宙应用服务。

英伟达表示,通过Omniverse Cloud,个人和团队可以一键体验3D设计和协作工作流程而无需依靠本地计算。英伟达称,Omniverse Cloud的早期支持者包括了RIMAC集团、WPP和西门子。

Omniverse Cloud运行于 Omniverse云计算机,这是一个云计算系统,由用于图形和物理模拟的NVIDIA OVX、高级AI工作负载的NVIDIA HGX和NVIDIA图形交付网络(GDN)组成,其中GDN是全球级分布式数据中心网络,用于交付高性能边缘、低延迟元宇宙图形。

NVIDIA GTC大会主题演讲中,英伟达创始人兼首席执行官黄仁勋表示:“元宇宙,即3D互联网,连接了基于模拟引擎而体验的虚拟3D世界,而借助 Omniverse Cloud,我们可以将全球团队联系起来,以设计、构建和运营虚拟世界和数字孪生内容。”

黄仁勋演示了Omniverse Cloud示例,其中包含 Rimac Nevera高级实时3D汽车配置器,目前Rimac正基于Omniverse Cloud推出从设计到营销的端到端汽车管道。Rimac创始人兼首席执行官Mate Rimac表示:“Omniverse Cloud带来了效率和灵活性,使我们的工程团队能够专注于汽车模型设计本身,从而减少3D流程设计时间,通过3D汽车配置器,设计者无需手动渲染每一层,即可解锁无限的定制可能性,这大大节省了时间和金钱成本。”

WPP首席技术官Stephan Pretorius表示:“借助 Omniverse Cloud,我们正在改变构建、共享和消费汽车内容的方式——为我们的客户带来可持续的低排放产品。”

WPP是全球最大的营销服务机构之一,率先在Omniverse Cloud上推出了汽车营销服务,为汽车品牌提供定制高级3D内容和体验。

此外,基于早前宣布的合作伙伴关系,西门子与英伟达加强了合作,将共同基于Omniverse Cloud和NVIDIA OVX基础设施以提供Siemens Xcelerator业务平台解决方案。

西门子数字工业软件总裁兼首席执行官Tony Hemmelgarn表示:“开放的生态系统是Siemens Xcelerator数字业务平台的核心设计原则,我们很高兴扩大与 英伟达的合作伙伴关系,开发Siemens Xcelerator和Omniverse Cloud集成解决方案,以实现工业元宇宙。”

值得一提的是,Omniverse Farm、Replicator和Isaac Sim已可在NVIDIA NGC上使用,使用具有NVIDIA A10G Tensor Core GPU的Amazon EC2 G5实例支持在AWS上自助部署。此外,Omniverse Cloud将作为NVIDIA托管服务,支持应用程序早期访问。

打造半沉浸光场显示屏,MIT衍生企业Brelyon获1500万美元A轮融资

MIT(麻省理工学院)衍生企业Brelyon于今日宣布完成了1500万美元的A轮融资。本轮融资由洛克希德·马丁风险投资公司和MIT附属E14基金领投,康宁、LG Technology Ventures、UDC Ventures(Universal Display Corporation的企业风险投资部门)和Franklin Templeton跟投。其中显示面板领域的领军企业LG对Brelyon的投资格外令人注意,可以视为LG对这家企业的密切关注。

Brelyon于今年1月份在拉斯维加斯的CES上首次展示了其技术,其研发的Ultra Reality拥有光场技术专利,使用“精确的波前(wavefront)工程来创造拥有超大视场角和真实光学深度的图层,生成沉浸式的虚拟全景显示屏,无需使用头显也能让观众环绕在虚拟屏幕中”。

Brelyon CEO Barmak Heshmat向TechCrunch表示:“未来的人机体验需要更好的沉浸感和智能技术。十年来,我们一直在试验VR和可穿戴设备,但事实证明,大多数人并不喜欢长时间将某样东西戴在脸上。人们已经使用屏幕长达50年,而我们建立这家公司的逻辑非常简单:如果我们能够让你无需将屏幕戴在脸上就能够获得其一半的沉浸感,同时还能够兼容所有现有内容,将极大的提升现有计算机的体验,帮助人们更好地迈向新兴的元宇宙”。

“我们的主要投资者是洛克希德马丁风险投资公司和MIT附属的E14基金”,Heshmat指出。“E14是一家投资MIT衍生公司的尖端科技风投基金,它使我们能够与MIT的人才库和前沿技术生态系统保持联系。而洛克希德马丁风险投资公司则能够帮助我们真正接触到一些愿意在早期就采用我们技术的企业。”

Brelyon目前已经将20多家企业纳入了其早期访问(Early Access)计划,这笔融资将帮助Brelyon发展这些试点项目,并在企业市场站稳脚跟。

“短期内,我们将专注于产品量产和配套软件的开发。具体而言,我对于虚拟显示器更基本构架的扩展感到兴奋,这将能够帮助我们厘清量产所需的条件并提高单位经济效益”,Heshmat解释说,“其中一些量产技术的发展可以广泛应用于一系列的产品,而不仅仅是我们Ultra Reality产品线。我们也对和LG Display的合作感到兴奋,期待能够从企业市场到更大的元宇宙市场都与LG Display形成良好的合作基础。”

电脑显示器的创新已经停滞不前,仅仅是在分辨率和性价比上进行提升。上一次发生重大革新还是由笨重的CRT显示器过渡到纯平显示器。“我认为,10年后我们回顾2D显示器和目前的计算机体验,与现在我们回顾CRT显示器和DOS操作系统是相同的感受。虚拟的,或者说光子的显示屏,就像是通向元宇宙的超级公路,完全改变你与计算机交互的方式。无论是眼对眼的沉浸式视频会议,还是分辨率和视场角相当于6台32英寸显示器的屏幕,又或是AI辅助内容生成,再到用于增强知识工作者能力的串联视觉计算机,基于我们的Ultra Reality,我看到了一个完全沉浸却不与现实隔离的世界”,Heshmat 表示。

“有关硬件的一切工作都需要时间,我们的使命是尽可能缩短技术落地的周期,但仍需要相当多的工作才能让量产成为现实,这中间没有大的技术障碍,更多的是细节的完善。市场风险和资本管理对于新技术非常重要,与垂直领域最杰出的客户深入合作是解决这些问题的最佳方式。”

LootMogul筹集2亿美元,以用于建设虚拟体育城市

据virtualrealitytimes报道,元宇宙体育初创公司LootMogul获得2亿美元投资承诺,该笔资金将用于在全球范围内建设虚拟体育城市。据悉,投资承诺来自Gem Global Yield,以股票认购形式提供,为期36个月。

LootMogul准备运用新资金推动以体育游戏为重点的元宇宙建设(包括建设虚拟体育城市),该虚拟体育城市将能实现真正的跨元宇宙和区块链(多链)平台互联以及拥有相关品牌与职业运动员,LootMogul表示,虚拟体育城市将可应用于包括Web、Oculus、HoloLens、Mobile & Console在内的平台。

在最新融资之前,LootMogul在上个月与开源区块链平台DigitalBits合作开发了MOGUL代币,该代币是LootMogul游戏生态系统的原生代币,MOGUL代币将与XDB/MOGUL流动性矿池一起添加至去中心化交易所NicoSwap。

目前GEM资金池高达34亿美元,其一直是加密领域初创公司融资来源,今年6月,GEM Global Yield通过出售H20N代币向CeDeFi 交易所Unizen投资2亿美元,并向总部位于南非的H20证券投资了1.5亿美元。

LootMogul是专业体育元宇宙平台(面向Web 3),业务涉及虚拟房地产、训练学院、区块链游戏、为品牌和运动员提供现实奖励的元宇宙商店,LootMogul致力于将网络游戏玩家和体育爱好者引入元宇宙以扩展Web 3社区。

Auxuman推出全球首个无代码元宇宙解决方案“auxWorld”

领先的无代码元宇宙平台Auxuman推出了auxWorld,这家成长中的元宇宙公司旨在通过公平的虚拟竞争环境,为品牌提供所需工具,致力于以全球首个无代码元宇宙解决方案更好服务客户,从而为各类创作者赋权。

通过auxWorld,品牌和创作者将有机会基于卓越图形、周到游戏玩法和对每个客户群有意义的实用程序参与创建虚拟世界体验。

Auxuman首席执行官兼联合创始人Negar Shaghaghi表示:“我们的第一款软件产品auxWorld可以彻底改变虚拟世界的创建方式,它为创作者提供了一种简单而精简的方式来构建高度身临其境和引人入胜的体验。具体而言auxWorld是一个创造性平台:创作者可在其中尽情创造,而用户将能享受无尽游戏、品牌商时刻都能与消费者接触互动。”

通常而言,设计和游戏玩法由平台决定,而这一直是创作者在元宇宙开发专属空间的障碍,相反,Auxuman让消费者参与到了元宇宙创建的每个阶段,并提供了无穷无尽的创造机会。同时,这也为品牌商和创作者提供了在元宇宙建立长期和可持续发展的绝佳机会。

“auxWorld使每名用户都能从元宇宙生态系统中受益,”Shaghaghi说,“基于auxWorld标准框架,创作者可以在很短的时间内开发出真正原创的内容。为此,品牌商将与我们合作提供包括NFT在内的资产和奖励,以鼓励创作者创作。”

值得一提的是,作为元宇宙领域的创新者,Auxuman引起了当今最知名的投资者之一马克·库班的注意,“auxWorld处于元宇宙创造的最前沿,Auxuman团队有着雄心勃勃的创新愿景,我很高兴看到Auxuman在描绘元宇宙未来方面发挥作用。”

向企业提供元宇宙工作平台,Spot完成550万美元种子轮融资

总部位于美国西雅图的初创企业Spot于近日完成了550万美元的种子轮融资,以向企业提供“模拟人生”式的元宇宙工作平台。本轮融资由Freestyle领投,Liquid 2 Ventures、Community Access Fund和Founder's Co-op参投,公司未透露完成融资后的公司估值。

Spot创始于2021年4月,此前曾获得170万美元天使轮融资。Spot创始人Gordon Hempton和Wes Hather此前是西雅图独角兽企业Outreach创始团队成员,还联手创办了Team Apart,一个有YC背书的工作场所交流平台。

Spot允许用户构建可用于活动或业务功能的虚拟中心,用户可以通过聊天和视频会议功能互相交流,以沉浸式的数字工作平台取代Slack平台的频道和分组讨论室。任何企业员工都可以通过网络浏览器访问该服务,目前包括谷歌、兽医院等多家机构都在使用Spot进行远程协作。Spot表示,目前用户已经在平台上创建了8000多个自定义的工作场景。Spot联合创始人兼Gordon Hempton在给媒体的邮件中表示,计划用本轮融资获得的资金将目前的元宇宙工作平台开发成“enterprise-ready”即达到商用标准的产品。

目前Spot共有9名员工,Hempton计划再招募四名员工开展后续的工作。

随着越来越多的企业采用现场办公与远程工作相结合的形式,这些企业正在将各种技术解决方案纳入管理分散劳动力的计划中。一些常见的远程协作工具包括Slack、Microsoft Teams和Discord;今年7月,微软还推出了Viva Engage,一款用于企业内部员工的社交媒体应用。也有一些公司正在尝试虚拟现实应用,例如Oculus for Business等等。

Hempton表示,Spot正“在激烈竞争的市场中打造一款雄心勃勃的产品”,这款产品将能够与Slack和Microsoft Teams等产品进行竞争,因为后者并未向用户提供前者所拥有的虚拟办公室体验。

AR培训软件公司Taqtile完成500万美元融资

美国AR初创公司Taqtile完成了由Ascend、Mesmerise、Downer Group、Innovation Lab等投资的500万美元融资,Taqtile将与企业客户合作提供基于软件的职业培训,以促进招聘和营销工作。

这家拥有55名员工的公司开发了一款名为Manifest的AR应用,该应用适用于包括微软HoloLens和Magic Leap在内的头显以及移动设备,基于该应用,全球客户将可开展培训等其他工作目标。

Taqtile成立于2011年,在转向混合现实业务之前专注于移动应用开发,Taqtile首席执行官Dirck Schou Jr.表示:“Taqtile将加速在国防、制造、运输、飞机MRO、物流、制药等行业部署Manifest,Taqtile全球合作伙伴对我们实现使命至关重要,这笔融资将使我们能够更好支持合作伙伴生态系统。”

另据美国国家经济研究局最近的一项研究,疫情之下美国劳动力短缺约为50万人,此外Taqtile指出,随着未来五年内多达三分之一的无办公桌工人缺口形成,这意味着越来越多的企业将采用新技术来培训员工。

Taqtile并不是唯一一家顺应这一趋势的AR培训创业公司,其与Ario(为一线工人提供服务的AR平台)和 Atheer(资金雄厚的初创公司、销售用于员工培训和入职的软件平台)存在竞争。

2018年,Taqtile与西雅图金县和微软合作启动了一个项目,为在西雅图西点污水处理厂工作的员工提供培训。如今,Taqtile与T-Mobile、埃森哲、微软、AWS等大型企业达成了合作,该公司表示,它“专注于”企业市场。

 

PART2   硬件追踪

英伟达发布下一代GeForce显卡——RTX 4080/RTX 4090

英伟达发布了下一代GeForce显卡:RTX 4080和RTX 4090。

RTX 4080

RTX 4080有两种变体;一款配备7680CUDA内核和12GB VRAM,起价899美元;另一款配备9728 CUDA 内核和16GB VRAM,起价1199美元。

英伟达声称,即便是12GB版本也比之前旗舰RTX 3090 Ti稍强,该公司还声称16GB版本的速度是RTX 3080 Ti的两倍。

据悉,这两款RTX 4080变体都将于今年11月上市。

RTX 4090

RTX 4090拥有16384 CUDA内核和24GB VRAM,起价1599美元。

该显卡实现了83万亿次浮点运算性能,使其成为世界上最强大的游戏GPU。

英伟达表示RTX 4090的速度是之前旗舰RTX 3090 Ti的两倍,不过,两者消耗的功率相同。

RTX 4090的上市时间为10月12日。

Ada Lovelace架构

RTX 40系列由英伟达全新“Ada Lovelace”架构提供支持,该架构引入了多项改进。

“Ada Lovelace”架构建立在台积电4纳米工艺节点之上——之前的“Ampere”架构使用三星8纳米工艺节点。

第三代光线追踪核心的光线追踪性能是Ampere架构的2倍以上,这些新内核还引入了“Opacity Micro-Map Engines”和“Micro-Mesh Engines”,这两个新的硬件功能可以加速某些光线追踪工作负载。采用光线追踪,着色器执行重新排序可将着色器性能提高多达2倍,英伟达称这可将帧速率提高25%。

另外,第四代Tensor Core的FP8性能是Ampere架构的5倍。结合新光流加速器,实现了深度学习超级采样(DLSS)3.0,与多年来在VR中使用的SpaceWarp空间扭曲和Motion Smoothing运动平滑重投影技术类似,DLSS 3.0可以生成合成帧以使输出帧率加倍。

最后,第八代NVIDIA Encoder引入了对AV1视频编解码器的支持,该编解码器在相同比特率下质量提高了40%,并支持HDR。

如果英伟达说法属实,那么“Ada Lovelace”架构无疑极大提高了GPU的性能,VR消费者是否立即购买RTX 4080或4090,还是等待AMD的回应?

高通、英特尔和Meta旨在AR/VR应用与雷达共存

据fiercewireless报道,包括高通、英特尔和Meta在内的公司正要求美国联邦通讯委员会FCC将60 GHz频段划分为三个部分,以便增强现实/虚拟现实/混合现实/扩展现实(AR/VR/MR/XR)应用可以与构成60 GHz频段的57-64 GHz 频谱范围内的雷达应用共存。

60 GHz 频段未经许可,被认为是AR/VR/MR/XR等应用的关键频段,因为其具有足够的带宽并且支持低延迟通信。

而有些企业则希望FCC修改拟议规则制定通知(NRPM),以修订目前60 GHz频段未经许可运行的固定和移动雷达设备的传输功率限制。

然而FCC NRPM与高通、英特尔、Meta息息相关,这几家公司认为改变传输功率限制将对延迟产生负面影响,从而导致AR/VR/MR/XR应用程序的用户体验不佳,因为FCC NRPM将支持雷达设备“无限制脉冲”,这将增加近300%延迟,从7毫秒增加到20毫秒以上。

几家公司指出,AR/VR/XR/MR应用程序的延迟目标不是任意设置的,并且IEEE和3GPP标准机构已规定这些应用程序需要个位数毫秒的延迟率,否则显示器将会闪烁、死机并导致用户产生晕动症。

高通频谱政策和监管顾问副总裁John Kuzin表示,导致雷达设备不受限制发出脉冲的问题就在于雷达设备本身会不断发出脉冲,因为通信设备被设置为“先听后说”,所以通信设备将等待通信。此外,如果通信设备开始发射并且雷达设备开始产生脉冲,就会干扰通信设备及其传输。

“我们正试图提出一个替代方案,”John Kuzin说,“使用60 MHz频谱在附近建立雷达和通信连接是完全可能的。”。

然而,这一提议遭到了包括亚马逊、谷歌、英飞凌、德州仪器在内企业的批评,这些公司声称,如果FCC修改规则,允许未经许可的雷达设备以高于当前支持的功率运行,那么对包括AR/VR/XR/MR应用程序在内的通信设备的干扰风险“将忽略不计”。

这些公司还提出了一项反方案,称这将促进“合理共存”。然而,该提案要求等效全向辐射功率EIRP峰值为10 dBm的设备提升到57 GHz至71 GHz频谱波段,EIRP平均水平为20 dBm及以上的设备工作在57 GHz到63.72 GHz频谱。

支持生成VR/AR数媒内容,Peel 3D推出全新3D扫描仪

加拿大专业级3D扫描仪商Peel 3D推出了Peel 3和Peel 3.CAD,这两款全新易于使用的3D扫描仪能够生成高质量的3D扫描、包括VR和AR在内的各类数字媒体内容。

这两款设备都具有符合人体工程学的设计和触摸屏界面,无论用户技能水平如何,都可以创建高分辨率扫描,基于引导用户可完成扫描过程,以确保清晰、高质量的3D扫描内容。

Peel 3D项目经理François Leclerc表示:“除了提高全新Peel 3D扫描仪的性能和创新设计,两款3D扫描仪都支持CAD软件,这是此前市场从未见过的测量解决方案,这表明了我们致力于为不同领域用户普及3D扫描体验的承诺。”

值得一提的是,上述3D扫描仪由deep.OS驱动,这是一种“数据采集软件”,可将3D扫描转换为与各种应用程序兼容的CAD文件。

“Peel 3D客户还可以选择V.I.peel,这是一项独家白手套服务和投资保护计划,其中包括了免费软件更新、扩展硬件维修范围等服务,”Peel 3D补充,“另外,我们还为全新3D扫描仪重新设计了一系列配件。”

Peel 3D和Peel 3.CAD已上架,售价分别为8490美元和11990美元。

Meta Quest Pro的专用主界面环境遭泄露,幻想风格十分华丽

即将发布的Quest Pro或许拥有一个不一样的主界面环境。如果你知道怎么操作,甚至可以在Quest 2上抢先体验一下这个环境。

这个主界面环境中展示了恢弘壮丽的白石建筑,背后是一个有着大小瀑布的山谷。建筑内有着围绕着火坑的座椅、一个人造池塘、还有各种神奇的装饰物,它们共同组成了一个充满幻想神话感觉的环境。

发现这个主界面环境的是开发者Basti564,此人经常会发布一些在Quest固件中发现的东西。本次泄露的这个名为「Cascadia」的主界面环境,应该是专门为Quest Pro准备的。根据Basti564所称,Quest 2上包含着一些代码,阻止用户通过老版头显设备加载这个主界面环境。

Quest Pro已经蓄势待发

这一切都预示着Meta已经准备好在10月11日的Connect大会上展示Quest Pro了,预估其正式发售也会在不久之后。

这款产品的原代号是“Project Cambria“,Meta将会将其引入一个全新的产品线:面向企业、专业人士、开发者与狂热爱好者的高端头显,专为工作、创作与虚拟会议进行优化。设备的价格尚未公开,但很可能会达到上千美元的水平。

根据近期泄露的消息,新的头显将会包括Pancake光学透镜、更窄的机身、更好的透视模式以及能提升社交体验的眼部和脸部追踪。

 

PART3

技术速递

USPTO公布苹果“Shazam”下一代功能专利申请,可应用于包括AR/VR头显在内设备

美国专利商标局(USPTO)公布了苹果一项专利申请,该申请涉及苹果歌曲应用“Shazam”下一代功能。专利表明,该应用迭代版本将支持在包括AR/VR头显、iPhone、iPad、智能隐形眼镜、汽车挡风玻璃平视显示屏在内的更多设备上运行。

值得一提的是,该专利描述了一项全新功能,该功能可通过一个动作(例如摇头)来判断用户对音频内容是否感兴趣,并能根据用户头部摇摆节拍以触发及识别用户正在欣赏的曲调。

该触发机制基于第一传感器数据和第二传感器数据识别音频的一个或多个元素与身体运动的一个或多个方面之间的基于时间的关系。

例如,这可能涉及正在欣赏曲调的用户的摇头节拍,而这种头部摆动可以被认为是对该音乐不感兴趣的表示。

而在另一示例中,基于用户动作的类型(如对应于兴奋的行为)和/或在重要事件发生之后的运动,则视为感兴趣的表示,例如,这可能涉及正在播放的特定歌曲,以及基于与歌曲节拍匹配的用户动作,以表示用户对该歌曲感兴趣。

另外,系统可根据对用户内容兴趣的识别,以主动执行各种操作。作为示例,设备可显示内容标识(如显示歌曲名称、歌手名称等),呈现与内容相对应的文本(如歌词),和/或呈现用于重放内容、离开物理环境后继续体验内容、购买内容、下载内容和/或将内容添加到播放列表。

在其他示例中,内容的特征(例如音乐类型、乐器类型、类别等)也可被识别并添加至为用户识别的附加内容。

苹果专利图3展示了图1示例电子设备,根据公开的实施方式获得用户运动数据;图4则说明通过用户运动与检测音频内容之间基于时间的关系以识别用户是否对音频内容感兴趣,以及相关流程图。

Niantic推出Lightship VPS for Web,将可视化定位系统引入8th Wall

AR技术供应商和「Pokémon GO」开发商Niantic推出了Lightship VPS for Web,将可视化定位系统引入了8th Wall。

这种基于浏览器的首创技术可将WebAR内容锚定到位置并使虚拟对象与所处空间进行交互,从而将现实世界与数字世界连接。Niantic表示,这将使增强现实体验更个性化、更有意义、更真实,并赋予了用户探索周围世界的新理由。

Lightship VPS for Web可将日常位置转变为体验式目的地,该技术本质上有助于解锁物理位置数字孪生,并增强AR体验,从而将流量引导到例如公园雕像或城市店面等特定位置,以新的方式吸引用户,进而产生现实世界价值。

Niantic在处理现实世界互动方面拥有丰富经验,这要归功于非常成功的AR手游「Pokémon GO」,基于驿站道具PokéStops和Ymys等游戏设置地点,游戏与现实世界位置的重叠及其互动更是促进了市场经济发展。

如今,随着VPS for Web的推出和引入8th Wall平台,开发者,代理商和品牌可以创建只能在一个位置使用的WebAR体验,从而加强了在特定位置的需求,或者可以在Niantic AR地图上使用任意数量的VPS激活位置AR体验,以增加此内容的覆盖面。不仅如此,用户还可以通过在一个项目中结合多个VPS激活位置来创建多位置体验,例如AR寻宝游戏和地理AR游戏。

Niantic首席执行官John Hanke表示:“在Niantic,我们相信元宇宙是人们探索和联系周围世界的桥梁,推出Lightship VPS for Web,将使开发者能构建锚定周围现实世界位置的沉浸式WebAR体验,我们知道这仅仅是个开始。我们迫不及待看到开发者社区基于新工具创建基于位置的全新AR体验。”

值得一提的是,Lightship VPS采用的Niantic AR世界地图可将AR位置以厘米级精度锚定,通过将该系统引入8th Wall平台,开发者现在可以创建具有高水平准确性和精确度的VPS AR体验,并可直接在移动浏览器中运行,而无需下载任何应用程序。

Meta旗下Reality Labs开发者展示全新动捕技术,仅用Quest头显就能模拟全身运动

能够实时追踪人体运动对于AR/VR应用的浸入体验来说是至关重要的。尤其在社交方面,能够使用全身来进行情感的表达与交互比使用表情符号要有效许多。在游戏方面,能够更准确的表现全身动作也是对浸入感的一大提升。

但是,一般头戴显示器能够提供的传感数据非常有限。

为了解决这个难题,Meta旗下的Reality Labs在近期展示了一项非常有意思的新研究:使用强化学习框架取得头戴显示器与两个手柄的信号,对可能进行的全身运动进行模拟。

简单来说,运用高质量的全身运动动捕数据进行训练,一个简单的策略网络可以在紧跟移动输入信号的同时,用适当的力矩来帮助角色化身进行平衡、走动与跑动。

通过开发者展示的结果视频来看,运动中的化身与用户高度匹配,即便没有下肢的数据,运用头显传来的6D移动信息,化身移动起来也能够紧贴地面。同时,在视频中开发者还展示了不同体型和地形上的化身移动表现。

不过,这项技术目前尚未完美,化身的动作模拟依然存在着一些不足。因为化身的动作是在没有额外的非物理基力下模拟而出的,在试图移动角色基点时需要一系列特殊的关节力矩。

不仅如此,物理模拟无法进行传送,所以当角色不断偏离用户之后,会变得很难跟上动作。因此,模拟角色在试图模仿一些高活跃度动作(跳舞、跳跃)时会摔倒,因为它们还没有接受相关扭矩控制的强化学习训练。

另外一个难点在上下肢的非常规性动作上,这会导致不同的运动被相同的上肢身体传感数据所代表,在这种情况下,策略会合成一个比较自然、符合物理性的下肢姿势,但这可能与用户所做出的姿态不契合。

虚幻引擎5.1版本Nanite和Lumen系统现将正式支持PC VR内容

由Epic Games开发的虚幻引擎5(Unreal Engine 5,UE5)在去年推出抢先体验后,已经于今年4月推出了正式版。此外,4月份Epic Games还确认了UE5已经被用于PSVR 2新游戏的开发。目前虚幻引擎5.1版本已经在开发中,并将带来对PCVR更好的支持。

在PC和游戏主机平台,UE5的Nanite几何系统能够带来全新的游戏制作和渲染方式。在前一代的游戏引擎中,艺术家需要导入不同精度的美术资源用于LOD功能。Nanite颠覆了这种方式,让艺术家可以直接导入最高质量的美术资源,并根据镜头与美术资源的距离自动调整渲染的精度,从而在较近的距离内提供极具细节的画面渲染效果。Nanite与UE5的全局动态照明和反射系统Lumen配合使用,带来了画面显示效果的飞跃。

Nanite和Lumen最初并不支持在VR中使用,因此VR游戏的开发人员必须使用传统的几何与照明系统,享受不到新引擎带来的优势。但目前Heavenue的CEO Alex Coulombe已经证实,随着Unreal Engine 5.1版本的发布,Nanite和Lumen系统将正式支持VR。根据Coulombe的说法,他测试的内容能够在使用移动版RTX3080显卡的笔记本上保持每秒90帧的刷新率,并使用Air Link串流到Meta Quest 2。

目前公开发布的UE5版本已经支持PCVR内容的开发,但Meta也有自己修改的UE5分支版本,推荐用于Quest 2原生内容的开发。值得一提的是,UE5的Nanite与Lumen系统并非为移动芯片所设计,因此目前并不支持安卓操作系统。

欧拓飞推出6DoF VR/AR头显测试系统“Buddy”

芬兰屏幕测量系统制造商欧拓飞(Optofidelity)推出了6DoF VR/AR头显测试系统“Buddy”,基于机器人模型人头及其专有视觉模块,该系统可用于测试VR头显和AR眼镜。

该系统高级版本支持6Do测试,显而易见,“Buddy”被津津乐道的设计是能够以完全自由运动的方式检测头显参数。

多轴使Buddy系统的测试多功能性成为可能,该框架在地板导轨上横向滑动,围绕其轴线旋转,并升高和降低“模型人头”,这模仿了头显用户所执行的自由运动:前进/后退、上/下、左/右、点头、滚动和偏航(侧向转动)。

Buddy系统主要应用领域为VR/AR头显的开发部门和生产线。示例包括校准、性能测试和检查软件内容,除了清晰度或色彩保真度等图像质量因素,该追踪系统还会检测并发现偏差等问题。

制造商提供有关与测试系统兼容的所有VR头显信息,为了提高检测效率,欧拓飞简化了包括所有必要组件在内的设置,Buddy系统甚至可以取代复杂的实验室。

此外,Buddy系统一个重要的指标是“运动到光子的延迟”,其测量头部运动与在虚拟世界中可见执行之间的延迟,如果延迟太高,背景移动响应久,这可能会触发用户恶心或降低沉浸感。

不仅如此,Buddy系统还可以检测物体在头部前方的稳定性,由于采用了新颖的同步技术,现代和未来的屏幕技术也可保持可测量性,这可应用于包括OLED,光场显示器和基于投影的屏幕。

微软与美军陆军联手打造,首批IVAS增强现实作战护目镜正式交付

▲2021年1月,Stryker装甲车中美军在测试IVAS套装

根据外媒报道,美国陆军于近日收到了首批与微软联手基于HoloLens 2打造的IVAS增强现实作战护目镜,帮助士兵在执行作战任务时实时查看和共享包括地图、敌方阵地、友军阵地以及载具外部状况等多项关键信息。

过去一百年来,坦克、战斗机和舰船不断出现革命性的发展,但陆军尤其是现代步兵的装备却一直停滞不前。美国陆军认为,IVAS(集成视觉增强系统)是步兵在21世纪所需的飞跃性技术。IVAS是围绕微软HoloLens 2增强现实护目镜构建的多功能集成化系统,包括了坚固耐用的平视显示器(HUD)、线缆、“冰球(puck)”电脑背包、可穿戴电池、队内通讯设备以及充电器。

IVAS增强现实作战护目镜与战斗机的HUD非常相似,将关键信息投射到士兵视野中。拥有IVAS的士兵能够看到队内其他人的位置、战场上的置顶路径、地方阵地和其他数据,还能够从附近的夜视设备接收包括低光和热瞄准系统的信息。士兵可以通过安装在车体上的摄像头“看穿”他们乘坐的车辆墙壁,或者查看战场上空飞行的无人机信息。IVAS 甚至可以让士兵使用夜视与高级瞄准和杀伤力辅助系统(ATLAS) 正确识别远处的敌军。

▲士兵演示如何通过ENVG-B夜视仪和兼容的步枪瞄具引导瞄准火力

此外,美国陆军还在部署增强型双筒夜视仪(ENVG-B,Enhanced Night Vision Goggle – Binocular),这是新一代的图像增强夜视仪,不仅能够提供立体的夜视功能,还可以无线连接到安装在武器上的夜视瞄准具。例如,拥有ENVG-B套件的士兵可以将武器举过墙壁,瞄准目标并开火,避免将自身直接暴露在火力之下。

目前,首批交付的5000台IVAS增强现实作战目镜已由美国陆军开始陆续接收。根据此前微软与美国陆军签署的协议,微软将以218.8亿美元的价格在10年内向美国陆军提供约120000台IVAS增强现实作战护目镜。这一订单数量庞大,受到了美国国会的质疑,认为这一数量远超出武装例如步兵、装甲兵、骑兵、特种作战部队、战斗工程师等精锐部队的需求。

值得一提的是,根据Breaking Defense在7月的报道,由于IVAS的出色表现,美国陆军在2023年将ENGV-B的预算削减到0,因为对于士兵来说一次也只能装备一套护目镜。尽管现场测试报告已经提交给国会,但军方也认为并非战场上的每个人都需要IVAS。国会希望美国陆军混合使用IVAS和ENVG-B来武装部队。

 

PART4   应用速递

轻松发布Web AR内容,Blippar WebAR SDK已集成至Unity

英国AR产品和服务解决方案商Blippar已将旗下WebAR SDK集成至Unity,以支持Unity开发者创建轻量级AR体验,从而轻松直接发布到任何Web浏览器。

Bilppar表示,借助SDK Beta插件,Unity开发者可以节省大量时间和精力,不再需要为了创建和发布WebAR体验而在多个平台之间工作。

Bilppar指出,这种集成基于开发者操作需求,这使得开发者能快速增加轻量级WebAR体验内容生产,并消除了要求终端用户下载应用程序的要求。

现在,开发者可以更高效创建WebAR内容,与专用AR应用相比,WebAR内容更易于访问。由于WebAR可以基于智能手机以触发任何对象、链接或二维码,因此也支持在Meta、TikTok、Snap等社交媒体平台以及电子商务及游戏等网站发布。

Blippar指出,WebAR SDK集成至Unity,意味着当AR体验基于网络时,可定位的用户规模将扩容至50亿智能手机用户,毫无疑问这将是一个巨大商机。

Blippar首席执行官Faisal Galaria表示:“在技术快速发展的时代,开发者需要拥有最好的工具,而孤立的平台工作往往会导致网络延迟,将WebAR SDK集成至Unity则支持开发者直接将AR体验发布到Web,从而为轻客户端XR体验内容提供新的市场机会。”

Meta Quest v44软件更新已推出,支持家长功能完全阻止侧载

Meta Quest v44软件更新现已推出,该更新包括了视频捕获功能选项,例如以16:9录制视频,以及提高视频捕获帧速率和比特率。此前,这些功能只能通过SideQuest获得,如今Meta正致力于使新用户不再需求SideQuest。

原本以上功能预计在v43版本推出,现在,随着v44更新我们迎来了久违的功能,Meta表示,Quest用户已能基于“高级相机设置”菜单更改视频默认格式和分辨率。

v44更新正在逐步推出,将支持用户以横向(16:9)而不是方形(1:1)进行视频录制,并提高了帧速率和比特率。作为对比,以往SideQuest用户,在最高1920×1080分辨率下以更高帧速率录制视频可能会导致某些游戏出现卡顿,以及占用更多存储空间。

此外,v44更新还包含一个新选项,使家长可以移除Quest 2开发者模式,从而完全阻止SideQuest侧载,SideQuest只能通过开发者模式安装以及访问第三方游戏和内容库。虽然家长可以锁定Quest平台特定应用程序,但开发者模式漏洞无疑让一些孩子避开了内容限制规则。

很明显,Meta致力于通过逐步提供与SideQuest相同的基本功能以有效控制侧载,App Lab 是Meta于2021年初推出的官方实验性游戏分发平台,现在拥有许多以前只能通过 SideQuest获得的相同内容,例如游戏demo和尚未被完整收录的抢先体验游戏,值得一提的是,Meta并没有阻止App Lab用户侧载。

鉴于移除开发者模式是为了保护孩子安全,因此不受该规则影响的普通用户可能不会抱怨。但如果决定Meta完全阻止侧载,那可能会引发热议,历史上,每当Meta试图完全关闭第三方软件时,都会遭到重大阻力。

早在2016 年,Meta就试图阻止SteamVR的Revive服务,该服务支持HTC Vive 等非Meta 头显播放官方商店的独家Rift内容。现在看来,Meta策略是提供符合标准(或从终端用户的角度来看足够好)的功能,以防止人们远离Meta Store以及App Lab平台。

用AR协助店内员工,Lowe's与英伟达、Magic Leap合作创建数字孪生应用

美国家居装饰零售商Lowe's最近宣布与空间计算公司Magic Leap和英伟达(NVIDIA)建立创新合作伙伴关系,通过数字孪生应用实现一个交互式商店,让商店员工可以查看实体店几乎所有的数字化数据并与之交互。据Lowe's称,这种互动可以优化员工运营和本地化规划,以更好地满足客户需求。

Lowe's 的数字孪生应用由Lowe's Innovation Labs团队构建,目前在两家线下店中进行测试,一家在北卡罗来纳州夏洛特,一家在西雅图。该数字孪生应用通过英伟达Omniverse 环境创建,对家居装饰实体店进行了1:1的数字复刻。

Omniverse通过实时协作和真实模拟增强了企业的3D设计和数字孪生工作流程。它将空间数据与其他来自Lowe's的数据(包括产品位置和历史订单信息)融合在一起,并将这些数据整合到能通过Magic Leap 2设备访问的AR应用中。

来自Magic Leap的小型轻量级企业AR设备——Magic Leap 2能为用户提供长达数小时的舒适佩戴体验。此外根据Magic Leap的说法,Magic Leap 2可以提供70°的视场角以及高质量的图像和文本易读性,使其在零售和企业环境中具有很大的优势。

“Magic Leap 2可以为企业提供极高的价值,数字孪生解决方案是一个很好的例子”,Magic Leap首席执行官Peggy Johnson表示。“Magic Leap 2为用户提供了在物理环境中与关键数字内容和数据进行交互的能力,使他们能够以前所未有的方式更有效地完成工作。”

在物理环境中集成数字内容并与之交互的能力为零售员工创新的工作方式开辟了无数可能性。借助Magic Leap 2和数字孪生,Lowe's的员工可以在AR中看到覆盖在实体店上的数字孪生全息图,帮助员工比较商店货架上商品目前的外观和实际的外观,以确保货架上的产品配置正确。员工还可以通过AR图层查看货架上方难以触及的货物信息,而无需爬上危险的梯子查阅货物的外包装。

此外受益于更新的协作方式和数字孪生的能力,Lowe's还将能够以新的方式查看销售业绩和客户流量数据,并通过3D热力图和常购物品组合间的距离测量来优化店内体验。

对于Lowe's而言,Magic Leap和英伟达Omniverse携手帮助它塑造了零售业的新未来,让其能深入了解如何使家居装修的购物体验尽可能顺畅,并根据每个客户的个性和口味进行量身定制。

「Horizon Worlds」“个人空间”升级,支持朋友聚会

「Horizon Worlds」是Meta为Quest用户打造的VR社交应用,如今,Meta针对应用“个人空间”进行了升级,推出了更加注重社交的版本,从而使用户社交更沉浸。

「Horizon Worlds」“个人空间”曾以浮岛作为场景,在其中用户可自定义虚拟化身及查看更新和事件,这基本是用户进入更多社交空间和参与活动的首发地点。

自今年6月以来,Meta面向部分用户推出了全新个人空间,支持用户与朋友聚会、玩迷你游戏,使个人空间成为了用户体验更多虚拟空间的公寓式平台。

现在,Meta表示,不仅将在未来几周推出覆盖更广用户范围的个人空间,还将推出包括设置访客行为规则在内的更多功能选项,以进一步帮助用户定制个人空间。

Meta博文:“你可以决定受邀对象,当主人不在线时,受邀客人无法访问主人空间。不仅如此,用户还可以设置访客规则以使访客尊重个人隐私。”

这实际上是Meta为用户提供的真正意义上“私人”社交空间,Meta还在更新空间行为准则,以“更好与物理世界人们遵守的公共空间和封闭空间行为标准相符合。”

可以看出,Meta采取的是稳步发展「Horizon Worlds」的更新计划,毫无疑问,逐步拓展用户基数是把控平台方向的早期尝试,这样一来,不仅不会使平台因为过度发展而失控,而且还能通过实验性推广推出吸引用户的内容,这同样也是「Rec Room」和「VR Chat」成功的原因。

 

PART6   会议

第二十二届中国虚拟现实大会正式启动!

图片

第二十二届中国虚拟现实大会(ChinaVR 2022)将于2022年11月18-20日在云南昆明举行。ChinaVR是国内顶级的虚拟现实领域学术会议,将共同探讨虚拟现实前沿科技进展、关键技术创新与展望、产业技术开发与推广应用等话题。ChinaVR 2022 将邀请包括院士、杰青、长江学者、行业技术专家等在内的国内外虚拟现实领域的专家学者,为参会者带来高水准特邀报告、主题论坛及年度进展报告、学术论文交流报告、会前课程、VR之夜、博士生论坛、大咖面对面、墙报与演示等内容,同期将举办2022年中国虚拟现实大赛(CCVR 2022)决赛,以及2022年国际虚拟现实与可视化会议(ICVRV 2022)。现向广大科研工作者公开征集原创性的高质量学术论文,欢迎从事虚拟现实以及相关领域研究的专家、学者、学生,以及工业界的专家、技术人员、工程师等踊跃投稿与参加!

主办单位:中国仿真学会、中国图象图形学会、中国计算机学会

承办单位:北京航空航天大学云南创新研究院、云南大学、云南艺术学院、昆明理工大学

协办单位:中国仿真学会虚拟技术及应用专业委员会、中国图象图形学学会虚拟现实专业委员会、中国计算机学会虚拟现实与可视化技术专业委员会

支持单位:虚拟现实技术与系统国家重点实验室(北京航空航天大学)、北京市混合现实与新型显示工程技术研究中心(北京理工大学)、计算机辅助设计与图形学国家重点实验室(浙江大学)、文旅部闽台非遗文化数字化保护与智能处理文化和旅游部重点实验室(厦门大学)、云南省人工智能重点实验室(昆明理工大学)

重要日期:

投稿截止:2022年9月10日

注册开通:2022年9月15日

论文录用:2022年9月30日

终稿截止:2022年10月15日

会议召开:2022年11月18-20日

会议网址:http://chinavr2022.aconf.cn/

扫码获取更多信息

第三十四届中国仿真大会暨第二十一届亚洲仿真会议

第三十四届中国仿真大会主题为“发展仿真科学工程 促进科技自立自强”,将与第21届亚洲仿真会议AsiaSim联合举办,定于2022年9月23∽25日在长沙北辰国际会议中心举办,邀请仿真领域专家学者与企业代表出席。大会采取“1+23+1”的会议开展模式,即1个学术主会场+23个学术分会场+1个仿真产业展会。       

会议时间:2022年9月23-9月25日

会议地点:湖南长沙北辰国际会议中心(湖南省长沙市开福区湘江北路三段1500号a3区)

主办单位:中国仿真学会

承办单位:国防科技大学、北京仿真中心

协办单位:北京航天联志科技有限公司、北京华如科技股份有限公司、中国航天科技集团有限公司八院八部、北京世冠金洋科技发展有限公司、北京格瑞纳电子产品有限公司

会议议程:

会务组联系方式

联系人:赵罡  田洁  苏志  刘诗璇

联系电话:010-82317098  010-82310612

电子邮箱:cassimul@vip.sina.com

有关本次会议的详细情况请登陆中国仿真大会会议网站网页:www.cnsim.org.cn/cass-sim/cn/

 

PART8   比赛

关于2022年第十届全国大学生数字媒体科技作品及创意竞赛通知

 

大赛简介:

      为充分发挥高校作为我国文化产业的生力军作用,提升大学生创意表达、创新能力,引领各高校及相关学科与专业社会发展及产业升级上有所作为,实现高校教研成果创新性发展与创造性转化,充分繁荣发展我国文化事业和文化产业,为提高国家文化软实力做出贡献。在连续成功举办九届“全国大学生数字媒体科技作品及创意竞赛”的基础上,中国人工智能学会继续举办“2022年第十届全国大学生数字媒体科技作品及创意竞赛”。

       本届大赛在历届“自主选题”参赛的基础上,引进国家需求及行业先进技术设定为“指定命题”,力求通过组织学生赛事及学术研讨活动,广泛挖掘和培育智能科技服务文化领域具有成长性的人才和项目,发现创意与鼓励创新、支持创业,搭建开放式智能科技与文创产业融合发展与服务平台,为高校各专业在校学生及毕业学生的优秀项目提供展示平台,助力其未来发展。

大赛宗旨:

      本竞赛旨在弘扬我国优秀民族文化,加快我国高校培养人才与社会发展需求之间的协调发展,促进高校相关专业的内涵建设、提升专业教师的教学水平、提高学生的学习积极性及团队合作意识、搭建校企、政产学研合作平台,助于我国高校大学生在新时代传承优秀传统文化,在传承中融合,在融合中创新、在创新中成长,提升其创新、创意、创造能力,为国家健康发展和人民获得美好生活的做出贡献。

主办单位:中国人工智能学会  

承办单位:

江苏理工学院  

北京理工大学  

北京工业大学  

北方工业大学  

上海大学    

重庆邮电大学  

湖南工业大学  

兰州文理学院  

沈阳理工大学  

暨南大学    

华中科技大学  

山东财经大学  

广东财经大学  

西安邮电大学  

西南大学    

东北大学    

澳门城市大学  

潮汕职业技术学院

协办单位:

CAAI科普工委会

CAAI女科技工作者工委会

CCF虚拟现实与可视化技术专委会

支持单位:虚幻引擎中国

时间安排:

联系方式:

竞赛官网:mit.caai.cn

官方邮箱:dmt_competition@vip.163.com

参赛学生交流专用QQ群(群号为:881839600,838939812)

 


欢迎您的宝贵建议和投稿!

联系方式:

端木海婴:18802154333(同微信)

杨     辉:13970929926(同微信)

刘 向 群:18101039058(同微信)

邮       箱:technews@chinavr.org

 


联合出品:

中国计算机学会虚拟现实与可视化专委会(CCF-TCVRV)

中国图象图形学学会虚拟现实专委会(CSIG-VR)

中国仿真学会虚拟技术及应用专委会(CSF-VTA)

中国电子学会虚拟现实分会(CIE-VR)

本期信息来源:以上信息来自未来科技全接触、93913、中国人工智能学会、中国仿真学会、中国计算机学会、中国图象图形学学会等综合整理

格式编辑:小艾