第一财经杂志 2024年09月30日
Meta想用Orion重新定义移动设备,就像苹果想用Vision Pro重新定义个人电脑
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Meta发布一系列眼镜类设备,包括Quest 3S、更新版RayBan Meta及Orion。Orion具多种交互方式,但其成功取决于AI水平且成本高昂。Quest 3S以性价比推动销量。Meta欲通过这些产品定义下一代计算平台硬件形态。

Meta发布Orion智能眼镜,由眼镜本体、接收神经信号腕带及独立计算设备构成,支持多种交互方式,镜腿内置微型投影仪,可将镜片变成显示器,但其显示效果与Vision Pro可能存在差距,且受限于背后的AI能力。

Ray-Ban Meta智能眼镜是Meta与Ray-Ban合作款,接入Llama3大模型后能提供多种功能,销量可观,但其只是AI眼镜,并非AR眼镜。Meta欲复制其成功推出Orion,但Orion也受AI能力限制,且实时翻译等功能有延时。

Orion目前还是原型机,制造成本高,每台约1万美元,主要因制造镜片的碳化硅材料难度和成本大。Meta希望该产品能更小、更亮、分辨率更高且价格大幅降低。

Quest 3S更新了头显系列Quest,使用与Quest3相同芯片,分辨率略低,价格大幅降低,被称为最实惠的混合显示头显,还新增功能,Meta希望其成为室内个人电脑的延伸。

Key Points

扎克伯格认为,就像手机升级为智能手机一样,未来每个戴眼镜的人都会将他们的眼镜升级为智能眼镜;

第三方估计称,Ray-Ban与Meta合作的智能眼镜已经售出100多万台;

Meta想要在公司内部复制Ray-Ban Meta的成功,Orion是这一策略的结果;

 

不过和Ray-Ban Meta一样,Orion日后也将受制于眼镜背后的AI能力——它目前还不能像GPT-4o那样实时视频交互。

当智能手机的创新变得乏味,科技公司们开始将野心押注在下一代计算平台上。这些产品名字各异,从VR(虚拟现实)、AR(增强现实)到MR(混合现实);形态也各异,有的把眼睛和半个头部完全包裹起来(比如苹果的Vision Pro和Meta的Quest系列头显),有的则仅仅在普通太阳镜的镜腿上加入可以通过云端接入大模型的芯片(比如Ray-Ban与Meta合作的智能眼镜Ray-Ban Meta)。

虽然名字和形态各异,这些「眼镜」厂商的目标一致——它们都想定义下一代计算平台的硬件形态。

继苹果之后,Meta也加入了这场竞赛。北京时间9月26日凌晨,Meta在一年一度的Meta Connect大会上又发布了一系列架在鼻梁上的眼镜类设备,从头显Quest 3S到更新版的RayBan Meta。此外,Meta CEO扎克伯格在这场发布会上还发布了一种处于两种产品形态中间状态的全新产品——Orion,Meta称之为「智能眼镜」。

Meta对智能眼镜的要求是时尚。

发布会上,工作人员拎着一款银色箱子上台,扎克伯格在欢呼声中打开箱子拿出了这款眼镜,「这是Meta第一款消费级的全息AR眼镜。」扎克伯格说。

 

智能眼镜:一个至少10亿用户的市场

Orion由三部分构成:眼镜本体、接收用户神经信号的腕带,以及一个名为「冰球」的独立计算设备。腕带配备了基于手腕的神经接口,用户佩戴腕带后,就可以通过手势控制应用程序,腕带的触觉反馈能让用户知道手势何时被识别;「冰球」则承载着计算功能,分散眼镜的重量。

Orion眼镜既支持语音交互,也支持基于腕带的手指捏合交互。后者是Ray-Ban智能眼镜不具备的。

Orion眼镜本体看起来就是个比普通眼镜稍微「粗壮」一点的眼镜。镜腿内置了微型投影仪,用以把用户眼前的普通镜片变成一个显示器。戴上它,用户可以玩游戏、视频通话、浏览应用程序、随时查看信息提示——它会随时显示在眼前,还可以通过语音与之实时交互,完成翻译、导航工作。Meta称,背后内置了Llama系列大模型。

镜腿中内置的微型投影仪会将数字内容投射到镜片上。

交互方面,Meta采取了和苹果Vision Pro类似的方案:通过追踪用户的眼部运动定位被选择的对象,然后用手指捏合选中对象、调用应用程序。为了全方位捕捉外界信息和用户手势,Vision Pro用了12个摄像头。Meta的Orion则只安装了7个摄像头,不足部分它搭配腕带感应的神经信号来共同完成手眼追踪。

Orion通过微型投影仪显示的画面效果,和Vision Pro通过实体屏幕直接展示的显示效果可能还存在差距。不过Orion轻得多。

Orion是Meta旗下第一个基于手腕的神经接口驱动的设备,相关技术来自于Meta在2019年收购的CTRL-labs公司。因为把交互和计算设备都外置了,Orion眼镜本体的重量变得很轻,仅重98克,比重达600克至650克的Apple Vision Pro轻上不少。

虚拟信息投射在镜片上,真实物体通过镜片直接看到。

早在去年苹果发布Vision Pro不久,扎克伯格就声称,Meta和苹果对数字体验的未来有「哲学」上的差异——苹果的Vision Pro展示案例都是用户独自一人坐在沙发上,而Meta对元宇宙设备的定位是鼓励人们产生「新的社交形式」。

扎克伯格认为,就像手机升级为智能手机一样,未来每个戴眼镜的人都会将他们的眼镜升级为智能眼镜,甚至很多今天不戴眼镜的人最终也会戴眼镜——因为它是智能的。

两个都戴了Orion眼镜的人可以玩虚拟乒乓球游戏。

不过,扎克伯格不认为智能眼镜会很快取代智能手机。「我不认为人们会很快摆脱手机。」他说,就像手机成为主要的计算平台时,我们并没有摆脱电脑,我们只是换了个地方连接互联网,智能眼镜的故事路线将同样如此,它不会取代手机,但会变得越来越有用。

 

Meta AI:眼镜背后的能力还不足

英伟达CEO黄仁勋、The Verge副主编Alex Heath率先体验了Orion,黄仁勋赞叹这款眼镜「追踪、亮度、色彩对比度很棒,看得很清楚」;Alex Heath则和扎克伯格戴着Orion一起玩了场虚拟乒乓球游戏。不过谁都清楚,Orion能不能卖出去、能卖多少,基本上就取决于背后的AI水平。

同一场发布会上,Meta还发布了Ray-Ban Meta智能眼镜的更新。这款眼镜是Meta与Ray-Ban(雷朋)眼镜公司的合作款,去年10月接入Meta的Llama3大模型后,能够为用户提供AI语音交互、AI识物、翻译等功能。Ray-Ban母公司Essilor Luxottica称,「Ray-Ban Meta」最新一代眼镜在几个月内的销量,超过了前几代眼镜两年的销量总和。第三方估计称,这款眼镜已经售出100多万副。

Ray-Ban Meta只是一款AI眼镜,不是AR眼镜,你通过它看不到应用程序。

Meta想要在公司内部复制Ray-Ban Meta的成功——Orion是这一策略的结果。不过和Ray-Ban Meta一样,Orion日后也将受制于眼镜背后的AI能力。

9月26日更新的Ray-Ban Meta新功能包括实时AI视频处理和实时语言翻译。现场演示中,扎克伯格与一位墨西哥综合格斗职业选手一起戴上Ray-Ban Meta眼镜,一个人说英文,一个人说西班牙语,展示了眼镜携带的AI是如何完成实时翻译的——说是实时,其实延迟不少,AI只能在一个人讲完之后才开始翻译,并不能做到同传。而如果在室外嘈杂环境下,这种实时翻译功能是否还能实现并未在发布会上展示。

所谓实时翻译其实是有延时的。

Meta称,其智能眼镜将很快具备实时AI视频功能,这意味着你可以向Ray-Ban Meta眼镜询问眼前看到的东西,Meta AI将实时口头回答你。这一功能预计将在今年晚些时候推出。目前,Ray-Ban Meta眼镜只能根据拍照描述或回答与图片有关的问题。

Meta目前最先进的模型Llama 3还不具备GPT-4o或者Gemini那样的实时视频交互能力, 9月26日更新的Llama 3.2,其中最大尺寸的版本依然只能够识别和理解文本和图像。

Meta AI已进入Meta旗下所有移动应用程序。

如果Llama系列模型更新速度不够快,Orion眼镜最终推出时可能会被其他同行赶上。今年6月28日,智能眼镜品牌Solos就已宣布,将推出配备摄像头的智能眼镜AirGo Vision,搭载OpenAI最新发布的GPT-4o模型,预计于今年晚些时候上市。

 

成本也是一个问题

这场Connect发布会举办前,扎克伯格接受The Verge采访时称,Meta用了10年时间研发Orion,它目标的表现「远远超出了」Meta最初的预期,但「还没有实现目标」。Meta希望这款产品「再小一些、亮度再高一些、分辨率再提升一些,最重要的是,价格要大幅降」。

更高品质的全息投影虽然难,更广视野的镜片同样昂贵。

Orion目前还是个原型机,Meta还没有给出定价,也没有量产计划。这款产品据说早在2018年就已从研发走向产品化阶段,目标是每年发货数万台。但2022年,随着公司整体缩减开支,扎克伯格搁置了Orion的发布。那一年,Meta对元宇宙的狂热引起了股东不满,股东要求Meta削减20%的员工开支,并将元宇宙的支出砍半——Reality Labs的投资要限制在50亿美元内。

Vision Pro采用右侧的VST方案,Orion和国内的Rokid、Xreal等厂商都采用左侧的OST方案,不过镜片材料不同,折射率也不同。

Meta高管们称,搁置Orion的主要原因是制造成本高得惊人——每台设备的成本约为1万美元——接近3台Vision Pro的价格。这主要源于制造镜片——一种碳化硅材料的难度和成本,Meta号称这种材料具有「高折射率」有助于眼镜实现更宽视野,大多数AR设备的视野范围在30到50度之间。根据The Verge的实测体验,Orion 拥有的视野达到70度。Meta在设计阶段预计,这种材料将在行业中广泛使用,成本会更便宜,但这并没有发生。

 

Quest 3S:用性价比推动销量

Orion的发布和扎克伯格对Orion眼镜的不断推介,使得Meta所押注的下一代计算平台的核心看起来正在转移——从笨重的头显转向轻便的智能眼镜。

不过9月26日的发布会上,Meta依然更新了其头显系列Quest。更新后的Quest 3S,使用了与去年发布的Quest3相同的高通骁龙XR2 Gen 2芯片,显示分辨率比Quest 3略低。价格方面,去年Quest 3的售价为499美元,今年Quest 3S的128GB版本售价299美元,256GB版本售价399美元,相当于Quest 3的降价款。Meta称Quest 3S为「最实惠」的混合显示头显——其价格只有苹果Vision Pro的1/10。

除了在价格上发力,Quest 3S还效仿苹果Vision Pro,新增了用于切换「透视模式」和「沉浸模式」的按钮,将使用场景从游戏延伸至办公、看电影、搜索。如果说Orion可能部分取代室外的手机,扎克伯格则希望Quest系列成为室内「个人电脑」的延伸。 

附:Meta在头戴设备领域的产品和投资

2014年,Facebook收购VR设备商Oculus;

2016年,推出Oculus Rift,这是首款面向普通消费的VR设备;

2018年,与小米和高通合作,推出Oculus Go(在国内叫Mi VR),定价199美元;

2019年,推出Oculus Quest,可以看作是Meta规划下推出的首款VR设备;

2020年,推出Oculus Quest 2;

2022年,推出Quest Pro,被定位成生产力工具,售价高达1500美元;

2023年,推出Quest 3,起售价499美元;

2024年,考虑考虑收购雷朋眼镜(Ray-Ban)母公司EssilorLuxottica约5%的股份;

2024年,推出Quest 3s,起售价299美元;

2024年,推出智能眼镜原型Orion,尚未公布价格和量产计划。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Meta 智能眼镜 Orion Quest 3S AI能力
相关文章