登录
首页 >  科技周边 >  人工智能

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件?

来源:搜狐

时间:2023-08-26 23:43:30 357浏览 收藏

来到golang学习网的大家,相信都是编程学习爱好者,希望在这里学习科技周边相关编程知识。下面本篇文章就来带大家聊聊《苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件?》,介绍一下,希望对大家的知识积累有所帮助,助力实战开发!

文/VR陀螺 万里

可能不少人还记得前些年由于新冠疫情导致在线视频会议软件需求爆发的情景:2020年2月钉钉的MAU从7000万迅速突破至2亿、海外会议软件Zoom 2021年连续三个季度的营业收入增幅同比增长超过了300%。

在线会议软件在元宇宙概念盛行的背景下迅速走红,二者之间产生了非凡的相互作用。比尔盖茨曾指出,“在未来两三年内,我预测大多数虚拟会议将从2D图像转向元宇宙,一个有虚拟形象的3D空间。”

目前很多在线会议软件都进行了元宇宙相关的探索与尝试,如Meta于2021年发布Horizon Workrooms,微软Teams上月底推出了3D头像功能。一个值得关注的亮点是苹果最近发布的Vision Pro可以实现3D FaceTime视频通话。

市场上有很多强调元宇宙会议的平台,它们在用户体验和产品策划思路方面也有所不同。究竟什么产品才是我们所需要的呢?接下来,陀螺君将对市面上几款不同定位的虚拟会议软件进行体验并逐一拆解,从中一窥虚拟会议软件的技术路径以及发展脉络。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:苹果

软件1:佳能Kokomo—手机+头显,玩法类似于MR录制

尽管大多数人将佳能视为传统的影像设备制造商,然而,该公司已经积极参与元宇宙的发展并进行了多项探索。如2021年,佳能推出3D VR影像制作解决方案——EOS虚拟现实系统(EOS VR系统),可用于3D 180° VR视频的创作与直播等场景。去年CES期间,其展示了VR会议软件产品Kokomo,该应用4月底正式上线App Lab,进入了小范围公测阶段。

Kokomo联合创始人Jon Lorentz曾经指出,打造软件的初衷,旨在提供一种能超越现有电话、FaceTime或Zoom视频通话的解决方案,即不仅能在屏幕上看到对方,还能切实感到对方的存在。

玩法上,Kokomo有点类似于PICO去年推出的混合现实录制(MRC)功能,即通过手机端捕捉用户真实影像,然后把影像放置于VR空间中,以实现真实通话效果。为了避免手机拍摄时因为佩戴头显而产生的脸部遮挡问题,Kokomo的解决思路是预先录入用户真实的3D面部表情,然后在通话过程中把脸部表情拼接到上半身,以实现完整显示效果。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 左为软件使用示意图,右为理想的VR显示效果,图源:Kokomo

这款软件的优点主要集中在几方面:通过视频录制来取代传统的Avatar,它可以补充用户腿部动作、面部神态细节以及身高等更多真实信息。此外,它还支持3D音频、裸手交互等特性。

陀螺君体验发现,想要顺利实现通话,操作上略为繁琐,需要经历下面四个步骤:①手机APP添加好友;②登陆头显然后绑定手机账号;③在头显端/手机端发起通话申请;④把手机放置在腰部以下的位置以拍摄全身视频。

这款软件仍属于内测阶段,体验上还有不少瑕疵亟待解决。一方面,其抠图算法有待加强,在通话时,用户身体画面是一个图片贴片而非3D立体效果,并且有时候身体周围会有白边现象,观感一般;其次,网络时延大,有时候会出现动作滞后于声音的情况,不排除是网络代理的问题;最后一点,能实现触发完美显示(即在画面中展示用户脸部细节)的条件仍旧较为苛刻,并且用户的脸部细节显得较为呆板。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 脱离手机使用时用户会以眼镜+手柄的形式显示,图源:VR陀螺

软件2:Katmai—以浏览器为入口,再造线上办公空间

Katmai是一家成立于2020年的混合协作方案提供商,刚刚在今年4月成功获得了2200万美元的A系列融资。在元宇宙办公会议解决思路上,Katmai CEO Erik Braund认为,视频比3D化身更适合同事之间的交流。通过使用真实的视频,人们可以以更自然、更真实的方式传达情感,从而帮助建立融洽的关系。”关于这一点,Katmai与Kokomo保持了一致。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:Katmai

然而,Katmai并没有专注开发VR应用,相反地,他们开发了一套基于浏览器访问的虚拟办公解决方案。简而言之,Katmai可面向各大企业开发其3D版本的虚拟办公室,里面设立了会议室、私人办公室、茶水间等不同区域,以尽可能还原线下真实的办公场景。

用户登陆后,他将以一个圆形视频镜面的形象呈现,用户可以在里面的3D空间中自由走动探索,如果在路上遇到同事,还可与之进行交流。Katmai的虚拟办公室力求真实,如用户可以透过虚拟玻璃门看到会议室里面的用户,当关闭虚拟门时,能有效阻断声音的传播,以保证私密性。会议过程中,还提供了2D会议软件常见的功能,如共享屏幕和文字聊天。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:Katmai

据Braund透露,Katmai的解决方案将针对一些小型或初创公司,从而可以降低他们在物理投资空间方面的巨额成本。陀螺君认为,Katmai等解决方案的出现,或许能够为远程办公者带来一些线下办公的“舒适感”。Kaimai的客户之一TMS的首席创意官曾在一份声明中指出,“在虚拟办公室中聚在一起可以实现更深入的联系、实时协作以及获得自发性的乐趣,这在以前我们的远程工作流程中是无法实现的。”

软件3:Workrooms—主打数字人,内置多种脑暴工具

Workrooms是Meta于2021年所发布的一款VR办公会议软件,主打“会议+个人办公”两大场景,这里着重介绍它的会议表现。

软件使用前,需要创建个人Avatar形象。由于技术限制,目前Avatar只能显示用户的上半身,如果结合Quest Pro使用,里面还可以进一步补充用户的脸部以及眨眼等表情信息。

去年扎克伯格发布的元宇宙自拍照引发了一众吐槽,原因在于里面的Avatar系统建模粗糙甚至不及十多年前发布的《第二人生》。但陀螺君认为,Avatar细节真实性只是影响沉浸感的其中一环,得益于Workrooms优秀的物理引擎以及交互设计,最终能够实现相对不错的沉浸式会议体验。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? Workrooms的虚拟办公空间,图源:VR陀螺

Workrooms里面配备了6 DoF以及空间音频技术,用户可以通过转头等方式查看同事的肢体语言并且通过声音了解环境的相对位置。另外,Workrooms更加倾向于使用手势交互,以实现更多自然操作,而无需依赖手柄。

Workrooms里面配备了小型会议、分组交流、讲座等多种会议场景模板,最高可以容纳16名VR用户同时在线。另外,它还提供了通过网页连接的方式,可以支持多达50人参与的会议用户。在去年的Connect大会上,Meta宣布将与微软合作,未来的Workrooms将能够与Teams进行链接。

工具方面,Workrooms提供了三种办公解决方案:①每一名用户都有专属的办公桌面,桌面上配备了一个记事板,用户可在记事板上记录会议日程、想法等;②用户可以通过串流电脑使用,电脑屏幕会在虚拟会议室中呈现;③里面配备了共享虚拟白板,会议主持人或者分享者可以在上面共享图像、表格、PPT、电脑屏幕等内容。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:Meta

软件4:Vision Pro 3D FaceTime,主打写实、低上手门槛

FaceTime也成为了Vision Pro的一个重要卖点,这一点应该是没有意外的。在3D通话解决方案上,苹果倾向于走写实路线,M2+R1、LiDAR+结构光的硬件组合给它带来了得天独厚的优势。

使用前,用户需要先把脸放在头显面前扫描录入,即可快速生成一个专属的写实风Avatar形象Persona。在通话过程中,头显通过内外摄像头分别捕捉用户的眼神以及嘴唇信息,再交由AI驱动脸部模型生成连贯的交流动画。

根据苹果透露,他们对“数千人的不同群体”进行了测试,使用了解码器神经网络。Persona虽然没有详细的躯干和腿部细节,但在沟通交流中可以记录手势动作信息。

根据一些外媒分享得知,3D FaceTime的人脸表情有时候看起来会略为僵硬,The Verge体验后表示,“在通话过程中会有种恐怖谷的感觉,人脸除了眼睛和嘴巴大部分区域都被冻结了。许多媒体对这次通话给予了相当不错的评价,认为它很真实。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:苹果

根据苹果介绍视频,在FaceTime通话时,用户是以真人大小呈现的,里面配备的Spatial Audio有助于提升聊天的真实感。此外,在通话过程中,用户可以在空间中打开网页、PPT等更多应用,可以很好满足会议等场景。而Workrooms则需要串流电脑才能实现这一点。

作为苹果的一贯强项,iPhone、iPad等设备自然也可以无缝接入到Vision Pro的FaceTime当中,不过他们会相应以2D的形式呈现。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:苹果

软件5:Webex Hologram—光场全息成像

Webex是一家视频会议的“鼻祖级”企业,于1996年成立,2007年被思科收购,同年它占领了全球视频会议市场高达53%的市场份额,值得一提的是,如今视频会议软件的头部企业Zoom的创始人袁征也是出自于Webex。

Webex Hologram, the latest AR conference solution, was launched by Webex in 2021.。与前面所提到的基于VR头显或者网页版的在线会议解决方案不同,Webex Hologram在呈现效果上更为科幻,它结合使用了AR+全息技术。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 会议效果图,图源:Webex

在实现原理上,与会者需要使用采集设备来记录三维图像,紧接着系统对图像数据进行压缩、上传云端最后再传输到另一个用户的显示设备当中,以完成通信。全息技术的呈现方式有很多种,如纹理贴图、点云等,Webex Hologram采用的是光场方案,近日谷歌所发布的Project Starline最新原型所使用的也是这套技术方案。

Webex Hologram现已面向部分企业展开了超过700多次演示,并且完善搭载了12颗摄像头的最新采集原型设备。Webex暂未透露这套方案的成本售价,不过参考谷歌Project Starline,后者的图像采集端与显示端结合在一起,售价超过了1万美元。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 产品演示,图源:Webex

总结:五款产品各有优劣,真实性以及易用性会成为重要诉求

根据一项研究,人类主要通过语言和动作进行沟通,其中语言表达占45%,表情动作占55%。而语言表达里的文字内容占20%,语音语调占80%。这项研究背后可以反映,林林总总的办公会议类应用,除了解决远程办公跨区域协作这一底层需求外,尽量朝着沟通信息保留的最大化所发展。在这个过程中,以VR/AR、数字孪生、云计算、人机交互等元宇宙技术赋能会议应用,会是它下一个重要的发展方向。

由于新冠疫情因素助推,视频会议类应用市场经历了一段高速发展期,一些调研数据显示,该市场目前依旧具备很大的增长潜力。Zippia的研究表明,74%的美国公司正在展开或计划实施混合工作;IDC预测,2025年全球视频会议市场规模将达到212.1亿美元,2021-2025年的复合增速为17.5%。

我们回顾前面五款应用:佳能Kokomo、Katmai、Workrooms、FaceTime以及Webex Hologram,其实可以发现这五款应用的特点以及差异化都十分鲜明,这可视为元宇宙视频会议应用在不同方向的探索。如果以成本优势、技术成熟度、拟真感、沉浸感、易用性五个维度来看,它们各有优劣,并不存在所谓的“五边形战士”。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 评分仅作简单参考,图源:VR陀螺

拆开来看,Katmai这款产品更像是常见的在线视频会议的延伸,除视频交流以外,它还进一步补充了虚拟空间的角色,并且可以使用网页接入,易用性也不错。市场还需要进一步验证,以确定有多少企业需要这种3D办公空间,因为与其他几款产品相比,它的沉浸感一般。

佳能Kokomo和Workrooms虽然都是VR应用,但它们的重点不同。前者优先考虑真实性,将视频通讯放在重要位置,甚至完全丢弃了Avatar系统。只可惜目前这款软件还存在不少Bug,并且2D人物贴图结合3D背景有时候容易让人感到出戏。

Workrooms是一款以Avatar为切入点的VR应用,在呈现效果上相对比较饱满,并且功能也比较丰富。不过Avatar的卡通化问题从短时间来看依旧无解,有些人非常讨厌这个“第二身份”,并且需要佩戴笨重的头显设备使用,对于很多用户而言是一种负担。

苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件? 图源:Meta

Webex Hologram在呈现效果上可以视为较为终极的解决方案,全息视频呈现最符合我们的日常使用直觉,并且还可以进一步实现远程协助等操作。不过,从当前来看,光场等3D全息技术仍未成熟,参考Project Starline,它的成本高昂,体积庞大,并且仍需解决显示分辨率一般、3D区域可视角度偏小等问题,目前这套方案想要大范围推广仍不现实。

最后再聊一下Vision Pro的FaceTime,强大的硬件支撑让它能够轻松实现写实Avatar驱动以及多屏会议办公等传统VR一体机难以胜任的工作,并且无论是从扫描录入,又或者是通话交流的方式上,它实现方式非常自然,几乎没有上手门槛。当然,这款价格高达3499美元的头显不仅需要佩戴繁琐,也难以说服普通消费者购买。

随着技术的进步和社会的发展,我们有理由相信元宇宙会议应用将在不久的将来成为我们生活中不可或缺的一部分,企业八仙过海,市场大浪淘沙,未来又会出现怎样的元宇宙会议应用,有待时间揭晓。

以上就是《苹果发布3D版FaceTime,元宇宙究竟需要怎样的会议软件?》的详细内容,更多关于元宇宙,会议软件的资料请关注golang学习网公众号!

声明:本文转载于:搜狐 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>