2020 Google开发者大会:ARCore增加了快速放置API等功能
阅读日报是一个好习惯。
2020年谷歌开发者大会开幕,AR软件工程总监王启文发布了ARCore的最新消息
VR陀螺11月18日消息,谷歌开发者峰会是谷歌向开发者展示最新产品和平台的年度盛会。2020谷歌开发者大会于11月16日至21日举行。这是谷歌首次以全线发布会的形式与中国开发者见面。本次会议以“代码不止”为主题,为当地开发者介绍了相关产品更新和一系列技术支持内容,旨在增强开发者高效创新、持续创造愉悦产品体验的能力。
其中,11月16日,谷歌软件工程总监王启文发表了题为“ARCore为用户创造有效的AR体验”的主题演讲。
王启文莱昂是谷歌增强现实团队的软件工程总监,负责ARCore的机器感知算法项目,如运动跟踪和深度感知技术开发。在加入谷歌之前,他曾在微软、Facebook和Pinterest担任工程经理。利昂拥有麻省理工学院的计算机科学学士和硕士学位。
首先,王启文强调,AR作为一种视觉沉浸媒介,能够吸引人们的注意力,是一种新的体验信息、最终促进用户行动的方式。谷歌2018年发布的ARCore是一个AR开发者平台,为Android和iOS用户创造有效的AR体验提供了一个简单而强大的工具。目前已经应用到7亿个设备,上千个应用,取得了一些更新。
其中,王启文介绍了包括美图、滴滴、有道儿童词典在内的中国开发者如何利用ARCore提高产品的性能和体验。
美图利用ARCore的增广脸API搭建了100多个自拍滤镜,这是我们现在可以在BeautyPlus上体验到的AR特效,用户可以拍下照片和视频与朋友分享。
增强人脸应用编程接口从2D图像生成3D网格,可以跟踪嘴巴运动,眨眼,点头和一些复杂的细节。
滴滴的ARCore导航功能帮助乘客在火车站、商场、机场等大型公共区域找到司机。滴滴地图增加AR路标,15%的用户使用AR引导寻找订单驱动,80%的用户给予好评。
一个儿童词典应用程序使用AR帮助孩子以有趣且有吸引力的方式学习新单词。该应用将三角龙等文字与它在AR中的3D模型进行匹配,家长可以对AR图像进行记录或拍照,这将是以后孩子学习的参考资料。
此外,ARCore的新功能如下:
即时放置应用编程接口
一般来说,当用户在空间放置了ar物体后,需要用手机扫描周围环境,完成3D表面检测。但是这个过程需要一些时间和精力。事实上,在大多数情况下,我们可以在不知道AR对象的确切三维位置的情况下正确地呈现它。
借助快速放置API和几行代码,开发人员可以让用户将增强现实对象锚定到2D图像中,而无需确切知道增强现实对象的具体3D位置。如果您需要更精确的比例,您可以三角测量3D位置。
深度应用编程接口
景深API可以从单个RGB相机生成贴图。原理是从不同的角度拍摄多个图像,在移动手机时进行比较,估计到每个像素的距离。虽然只有一个RGB摄像头,但是景深传感器(比如飞行时间传感器)会让景深图更好。
景深可以在很多方面增强AR真实感。“遮挡”是景深的应用之一,即隐藏数字对象在现实世界中被遮挡的部分,使其看起来像是存在于真实场景中。
另一种是“表面交互”,即在设备的世界里,加入3D计算可以实现与真实物体表面的交互,比如创意AR物体,在表面设计弹跳和喷溅动作。这个功能可以用来开发新的互动游戏机制,让玩家可以躲在真实物体后面。Snapchat的跳舞热狗和海底世界镜头效果都使用景深。
持久云锚应用编程接口
云锚API可以用来与多个用户共享ar对象。这些对象可以在同一物理空间的不同位置同时查看和交互,因此AR内容可以使用更长的时间。
这相当于一个“保存按钮”,人们可以基于同样的AR体验反复创建和修改。比如Sybo和iDreamSky的Mark应用就采用了这个功能,人们可以在现实世界中和朋友一起创作、发现、分享ar艺术。
史诗游戏收购实时人脸动画公司海普森
Epic Games本周收购了实时人脸动画公司Hyprsense,该公司专注于人脸捕捉运动,可以将面部运动实时转换为动画3D图像。
Hyprsense,原名Binary VR,开始致力于VR解决方案,用挂在VR头戴式耳机前的3D红外捕捉摄像头精确捕捉面部运动数据,并于2017年交付了原始Oculus Rift和HTC Vive头戴式耳机的开发套件。
现在,三年后,该公司更名为Hyprsense,并于本周被Epic Games收购。虽然Hyprsense已经不是一个以VR为中心的企业,但是它使用的技术可以通过手机摄像头捕捉到实时的面部动作,然后在手机屏幕上转换成实时的3D动画,如下图所示。
其原理类似于Instagram、Facebook等社交媒体应用中的ar人脸跟踪技术。在此基础上,Hyprsense又向前迈进了一步,允许用户使用高度相似的3D头像来代替人脸。
Epic Games首席技术官金利贝里(Kim Libreri)在一份声明中表示:“Hyprsense团队的加入将有助于我们继续促进数字角色创新,并朝着让所有创作者都能表达其创造力的目标迈进。”
Epic表示,Hyprsense团队的主要工作是在游戏开发和数字人类项目上与它合作,这将加快Epic为开发者和玩家构建更好的新工具和系统的进程。
2020年11月评论和评分最高的Quest游戏和应用
虽然Oculus并没有公开太多信息让大家了解其VR商店中每个应用的性能,但是我们可以通过查看应用之间的关系得到一些信息。以下是截至2020年11月Oculus Quest前20名游戏和应用的快照。
为什么要发布这些数据?
虽然SteamVR库有一个全面的跟踪数据库,但没有类似的数据清单来跟踪Oculus商店应用程序。因此,我们发布这些数据是为了让用户、开发人员和分析师深入了解Oculus应用的未来。
简单介绍一下:
付费和免费申请是分开评估的
参与申请的评论数量必须达到100条或更多
四舍五入后的分数将使一些应用程序具有相同的分数,但它们的排名是按照精确的分数排序的
最受欢迎的付费Oculus Quest应用
每个应用的评分反映了用户的综合评价和对每个游戏的接受程度。
得分最高的付费Oculus Quest应用
一般每款游戏的相对销量可以通过评分数字来大致了解,数字高的游戏很可能比数字低的游戏卖的好。但是,这种判断方式肯定有错误。
最受欢迎的免费Oculus Quest应用
最受欢迎的免费Oculus Quest应用
《假期模拟器》增加任务手部跟踪支持
11月17日,《假期模拟器》(假期模拟器)开发者owl chemy Labs CEO Devin Reimer在Twitter上发布视频,展示了《假期模拟器》的场景。我们可以看到游戏增加了手部跟踪支持,测试人员对比了视频中的胜利手势和拇指。
Owlchemy的游戏我们很熟悉,玩家可以很快识别出手势识别的稳定性。Oculus Quest手势跟踪虽然已经上线,但是除了《里奇的木板体验》(里奇的普朗克体验)、《巫师圆舞曲》(巫师华尔兹)、《虚拟桌面》(虚拟桌面)之外,没有其他游戏支持手部跟踪。
Owlchemy的《假期模拟器》和《工作模拟器》(工作模拟器)目前都登陆了Oculus Quest,最近针对Oculus Quest 2进行了增强。这两款游戏的v23版本更新包括视觉升级,去掉了繁重的渲染,支持Quest 2上的90Hz。
《假期模拟器》最近提供了一个免费的“回到工作”扩展功能,在模拟器系列《工作模拟器》的第一部分增加了一些机制来提高游戏的乐趣。
《假期模拟器》 VR电竞联赛第三季将于2021年1月开播
VR大师联赛(VRML)《Echo Arena》电竞联赛第三季将于2021年1月举行,结构和形式较往年有所拓展。
联赛的具体时间是1月4日到5月2日,决赛在5月8-9日和5月14-15日举行。
作为新赛季扩展的一部分,VRML Echo Arena Distance已于本周开放,将作为玩家和社区领袖监督联盟的中心。频道会安排花名册,提供讨论联赛规则的场地。
新赛季也将引入升/降模式。游戏商店distance中对该规则的总结如下:
「大师赛采用循环制,而后续比赛则采用按部就班制。这个赛季会有很多轮比赛,每一轮都以挑战者杯结束。挑战者杯将由排名垫底的两个大师赛和排名前四的DIA队决定,哪些队有资格参加大师赛和楼梯赛。”
之前的《Echo Arena》电竞联赛在Twitch和Oculus场馆直播,VR用户可以在虚拟社交环境中观看比赛。VRML还为其他竞技VR游戏组织联盟,比如第一人称射击游戏《Echo Arena》。
几个月前在Oculus Quest平台推出的《Onward》采用竞技多人游戏模式,起源于Rift 2017年推出的《Echo Arena》中的独立单人游戏故事。
有兴趣参加第三季联赛的玩家现在可以在VRML Echo Arena distance网站创建一个账号,加入VRML Echo Arena distance服务器。
