资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

Snap合伙人峰会:强化AR试穿、云AR和ML技术研发,智能无人机亮相

原创 2022-04-29

Esther|编辑

4月29日,一年一度的Snap合伙人峰会再次来袭,本届峰会有几大重点:1)公布业务进展;2)展示由品牌、开发者创造的大量有趣的AR滤镜应用;3)升级Lens Studio,并推出云端AR服务Lens Cloud;4)专为服装试穿打造的AR功能;5)与Live Nation合作,为现场活动开发AR互动体验;6)未发布新AR硬件,而是推出便携的智能无人机,以推动AR短视频创作。

和往年一样,Snap在合伙人峰会上公布Snapchat等业务的最新数据,汇总如下:

  • ◎ Snapchat月活用户已经突破6亿人,日活则超过3亿人(连续三年实现同比增长);
  • ◎ Snapchat用户每天使用AR滤镜功能的次数达到60亿;
  • ◎ Snapchat已经深入年轻人市场,在20多个国家中,年龄在13到34岁的人群有75%以上都在使用Snapchat;
  • ◎ Snapchat AR滤镜创作者已经超过25万人,累计创作250万个AR滤镜;
  • ◎ Snapchat AR滤镜累计浏览量达5万亿次以上,超300位创作者开发的AR滤镜已经累计获得10亿次以上浏览量;
  • ◎ 来自30个国家的数百名开发者已经在使用Spectacles开发AR。

升级Lens Studio

Snap表示:在过去几年里,Snapchat经历了大量改变,它正在从一种基于摄像头的社交方式,升级成一个AR平台。开发者们在Spectacles AR眼镜和Snapchat应用中探索AR的多种应用场景,比如语音交互AR界面、多人AR、手语输入、基于ML技术的环境识别AR等等。

为了提升AR开发效果,Snap将升级Lens Studio,为AR滤镜带来更好的可定制性、逼真感和互通性。此外,还将结合光追(Ray Tracing)、ML环境识别等技术,来提升光影渲染效果,即使是AR珠宝模型,也能看起来足够逼真。Tiffany&Co、迪士尼和皮克斯等合作伙伴,就利用全新的Lens Studio功能开发了逼真的AR滤镜。

还有全新的AR云服务Lens Cloud,号称将带来次代AR体验。这是一个免费的后端服务集合,包含了远程3D资产渲染、基于地理位置的AR服务、持续的LBS标记、多人服务。接下来,还将推出云端储存服务,用于构建复杂的交互式AR。

此外,Lens Studio还推出API库,可将财经、翻译、天气、星座运势、体育比分等实时数据引入AR。而Event Insights功能,则用于优化摄像头的分析功能,允许开发者了解用户在使用AR滤镜时的行为。

基于ML的AR应用

Snapchat AR滤镜受到年轻人广泛欢迎,因而产生了大量AR创作者,他们设计出各种有创意的AR应用场景。接下来,Snap的研发方向将侧重于ML技术,因此推出全新的GHOST创新计划,专注于ML研发。

目前,gospooky使用机器学习技术,开发了一款环保主题的AR滤镜,可将汽车转化为虚拟花园。此外,Balti Virtual开发了一款基于Bitmoji的多人AR桌游,而MODEM则开发了一款基于姿态识别的AR瑜伽教学滤镜,Ecobatics开发了一款辅助低视力人群的AR界面增强滤镜(采用文字识别和手势识别技术)。

Snap还公布了一些基于Spectacles AR眼镜的应用,比如基于Connective Lens框架的多人魔杖游戏等等。

Camera Kit SDK

Camera Kit是Snap开发的一个SDK,其功能是允许品牌、合作伙伴在自己的应用和网站中引入Snapchat AR滤镜,好处是可以将AR滤镜与其他功能结合,带来全新的应用场景。Camera Kit推出后,已经有越来越多的客户通过它来引入Snapchat AR滤镜库,现有的用户包括迪士尼、微软Flipgrid、三星等等。

比如三星在Galaxy A系列手机的官方相机应用中接入Snapchat AR滤镜,在一年时间里三星用户累计使用Snapchat AR滤镜超10亿次。因此,三星在Galaxy F和M手机中也引入Snapchat AR滤镜。

另外,Zoog利用Lens Studio开发了一些基于通话故事的AR滤镜,并通过Camera Kit将这些AR滤镜引入自己的应用。而Visionaries777则是将Snapchat AR引入其AR教学平台,smule将Snapchat AR滤镜与卡拉OK应用结合,提升音乐社交体验。

强化电商AR营销

AR广告是Snapchat平台的关键业务,近年来越来越多的服装品牌开始用AR为消费者提供商品试用等互动体验。自去年1月开始,已经有2.5亿Snapchat用户使用AR购物滤镜,累积体验次数超过50亿。Snap称,Snapchat被评为最热门的购物分享平台。研究调查显示,用AR辅助消费可将退货率降低25%,而AR商品可视化可将转化率提升94%。

Snapchat的TrueSize技术可为AR广告提升42%投资回报率,Zenni Optical就利用该功能开发AR眼镜滤镜,已经获得超6000万次体验。此外,用户开始用Bitmoji虚拟化身来试穿服装,目前已经累计创建10个以上Bitmoji虚拟化身。

利用AR试穿数字虚拟服装的应用DRESSX也受到用户欢迎,每位平均用户每天使用AR试穿滤镜22次,75% DRESSX用户每天都使用AR。

为进一步满足品牌需求,Snap为AR试穿滤镜推出多项新功能:
  • 1)3D Asset Manager
  • 基于网页端UI,可简化3D模型的管理、优化流程;
  • 2)优化AR试穿体验
  • AR滤镜对用户身上的衣服要求更低,无需再穿紧身衣,也能通过AR换装;
  • 3)简化3D AR开发
  • 可通过AI技术,将2D图像自动转化为3D AR,无需用户创建3D资产,从而降低时间和资金成本;
  • 4)专门的试妆板块:Dress Up
  • 整合AR试穿滤镜,允许消费者一键浏览和试穿饰品和服装;
  • 5)Camera Kit for AR Shopping
  • 支持品牌商将Snapchat AR滤镜引入自己的应用和网站。这意味着Snap将打入各大电商平台,与现有的其他AR试穿方案竞争。Puma是该功能的首批用户之一。

与Live Nation合作

在本届峰会,Snap宣布与现场娱乐公司Live Nation达成长期合作,利用AR来优化现场表演,增进表演者与粉丝之间的互动。应用场景包括狂欢节、音乐节等等。首次合作将在今年5月的EDC活动上布局AR。

歌迷可以在音乐会上打开Snapchat,体验与表演互动的沉浸式AR,或是在音乐节等活动上,用AR来试穿商品、寻找朋友、解锁节日场地周围的独家地标。

pixy无人机

数据对于互联网平台非常关键,尤其是AR这种新兴的平台,需要大量的环境数据来优化AR效果。此前,Meta推出了Project Aria项目,通过内部员工、合作伙伴使用有摄像头的眼镜来收集环境数据。由于隐私问题,可收集的数据规模有限,而配备摄像头的眼镜采用穿戴式设计,受众规模远不及智能手机。Snap从此前推出的消费级拍照眼镜Spectacles中,就吸取了经验。因此,这一次Snap决定将摄像头放在受年轻人欢迎的无人机上。

年轻群体欢迎无人机,它可以为用户创造更多价值,带来有趣的高空拍摄体验。专业的无人机设备成本高昂,而pixy这种便携式无人机价格仅229美元起,还能升级AR短视频社交体验。

pixy的特点是有飘浮、旋转、跟随等预设的飞行路线/模式,无需控制器、设置简单,可跟着你的路线持续拍摄。这其实是一个简易、智能的无人机,它可识别你的手掌,可缓慢、自动的降落在你手上。

pixy录制的视频可实时保存在Snapchat Memories中,此外还为你提供快捷的特效剪辑、AR滤镜、音效等功能,允许你快速在Snapchat甚至其他社交平台上分享短视频。

 
每天五分钟,轻松了解前沿科技。    
         —— 青亭网 
阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号青亭网 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

数字媒体艺术 AR试穿 云AR ML技术研发 智能无人机

12307 举报
  0
登录| 注册 后参与评论