编译 | 徐豫
编辑 | 漠影
智东西9月18日消息,一年一度的Snap合作伙伴峰会(Snap Partner Summit)昨天在美国加利福尼亚州举行。会上,美国AR眼镜科技公司Snap发布了新一代AR眼镜Spectacles,以及全新的Snap OS操作系统。
这是Spectacles的第五代产品,其AR视野更开阔,AR呈像也更清晰,还能自动调整镜片的色调,来适应不同的环境光线。现阶段,该产品并不会出售给消费者,而是仅开放给AR特效创作者使用,价格为每月99美元。
▲第五代Spectacles AR眼镜(图源:The Verge)
除了AR眼镜,Snap旗下的社交媒体App“Snapchat”、AR滤镜和AR特效镜头(Lens)也迎来更新,增加了生成式AI功能。例如,通过一个名为“Easy Lens”的新功能,用户只需输入简单的英文文本,即可生成个性化的AR特效。
▲创作者借助Easy Lens功能,可以实现文本生成AR特效(图源:TechCrunch)
一、不到半斤重,4个空间摄像头,续航最长45分钟
Snap研发AR眼镜已有10年之久。据该公司介绍,其最新款的Spectacles重226克,比主流VR头显轻了将近一半,用户佩戴起来更轻巧。同时,该AR眼镜不仅能用语音和手势切换主菜单界面、控制AR特效,还可以实现多人交互的AR体验。
▲第五代Spectacles AR眼镜可以通过手势控制AR特效(图源:The Verge)
Spectacles配备了4个空间摄像头,将画面延迟控制在13毫秒内,“支持无缝的手部追踪效果”。例如,相邻的两个Spectacles玩家在同一个虚拟棋盘下棋。而非Spectacles玩家也可以通过全新的Spectacles应用,在手机端观看AR画面。
▲戴上新款SpectaclesAR眼镜,玩家可以在地铁上凭空下象棋(图源:Snap官网)
在AR眼镜的成像上,Snap也下了不少功夫。新款的AR眼镜利用了该公司自研的专利技术,使镜片变得“透明”。并且,其还搭载了小型高性能硅基液晶(LCoS)微型投影仪,这也让最后的AR特效更为真实和清晰。
Spectacles采用了高通骁龙的双芯片架构,在增强用户AR体验的同时,续航能力也有所提升。目前,其可单独连续使用最长45分钟。
据Snap透露,OpenAI的多模态AI大模型将与Spectacles集成,为AR眼镜用户提供更自然的现实世界感知和交互体验。
二、数百个特效模板,用户创作AR版的emoji更轻松
Easy Lens是Snap的开发者工具库Lens Studio中的一个新功能。据Snap介绍,其由Snap的AI模型驱动,利用生成式AI技术解析用户上传的文本描述,然后自动使用Lens Studio内现有的元件,来搭建AR特效。
除了Easy Lens,Snap还在Lens Studio中新增了另一个名为“Body Morph”的生成式AI功能。Body Morph可以根据文本和图片内容,创建3D角色形象,以及角色的服装和装饰。
▲创作者通过Body Morph功能生成AR特效(图源:TechCrunch)
与此同时,一些AI图像生成工具,以及数百种Bitmoji动画效果,都将集成到Lens Studio内,方便开发者使用。
▲创作者可以用Lens Studio中的工具制作多种3D资产(图源:TechCrunch)
为了优化开发者设计、制作和发布AR特效的全过程,新版的Lens Studio 5.0支持更复杂、更精密的AR特效。并且,Lens Studio 5.0引入了TypeScript、JavaScrip等开发工具,有利于团队协作。
三、400万个AR特效,累计37.5万人使用过
近期,Snap首席执行官Evan Spiegel在一份公司内部的备忘录中强调,Snap过去重点投资了生成式AI领域,并且对该公司的各项业务持续产生“变革性”的影响。
截至今年9月,使用AR特效的用户数达到了37.5万人次,较去年11月的33万人次有所增加。同期,Snapchat网页版、Snapchat App和AR眼镜Spectacles上发布AR特效的数量,则从350万个增加到400万个。
据Evan Spiegel透露,借助AI生成的AR特效,已经是Snapchat上最多人使用的AR特效之一。他认为,Snapchat的用户数增长,很大程度上得益于生成式AI这项技术及其应用。
有了AI模型的加持,Snap后续也能以更快的速度和更低的成本,来丰富AR特效的使用体验。Evan Spiegel称,今年该公司将启用AI视频生成功能,提供更多创新的社交媒体形式,“可以用AI重新诠释和呈现用户的创意”。
除此之外,Snap将持续优化用户在使用Snap相关的AI功能过程中的个人身份认证措施。
结语:生成式AI技术将加速AR眼镜商业化
未来,Snap计划寻找更多的生成式AI技术的应用场景,并在Lens Studio中增加更多生成式AI功能。例如,一个可以定制动画的AI生成工具,或者借助AI技术解析一个物体的2D视频,将其重构并生成为3D资产。
Snap的收入几乎都来源于其广告业务。然而,受广告市场疲软的影响,其目前面临较大的业绩压力。从该公司2024财年最近一个季度的业绩来看,Snap盈利低于市场预期。而且,今年以来,其股价已下跌40%。
为了提振公司业绩,Snap一方面将尝试采用几种新的广告形式,以重新激发广告商在Snap的产品上投放广告的兴趣。另一方面,该公司还计划简化Snapchat App的界面和分区,从而增加App内广告的曝光度。