在过去的几年中,Snapchat不断增长的Lenses集合已成为智能手机支持的增强现实的最佳范例,用户能够毫不费力地在照片中添加面部修饰,环境效果和特定位置的滤镜。现在,母公司Snap使创作者能够在Lenses中使用自行提供的机器学习模型,并希望该计划能激发ML开发人员和创意人员之间的合作伙伴关系。对Lens Studio的更新是目前的最大变化,Lens Studio是用于创建Snapchat大部分AR滤镜的免费桌面开发应用程序。
一项名为SnapML的新功能(与IBM的同名培训工具无关)将使开发人员可以将机器学习模型导入电动镜片,从而扩大Snapchat能够立即识别的现实对象和身体部位的范围。作为该技术的一个示例,Lens Studio将包含Wannaby开发的新的脚部追踪ML模型,使开发人员能够为脚部制作Lenses。对于Snap来说,挑战在于将ML开发人员吸引到Lens的创意库中,因为开发人员可能不会立即为其训练有素的神经网络立即提供明显的商业应用,而Lens的创建者(营销人员)可能只是在等待可以跟踪脚的事物,因此他们可以让人们虚拟地试穿鞋子。
Snap的Eitan Pilipski告诉VentureBeat,该公司将“促进创作者与ML开发人员建立联系,以便他们可以共同构建体验”,使双方能够专注于自己的长处。除Wannaby之外,包括CV2020,视觉滤镜制造商Prisma和几位Lens创造者在内的开发人员也正在开发基于SnapML的滤镜。 Lens Studio还添加了新的手势模板,以及“面孔地标”和“面孔表情”,这些模板可以改善特定情况下的面部跟踪。
此外,面向用户的Snapchat应用将扩展其“扫描”功能,使其能够识别90%的所有已知植物和树木,近400种狗,包装的食品标签和路易威登的徽标,以及SoundHound集成,以便用户查找仅使用语音命令的相关镜头。 Snap也正在预览一项新功能,即本地镜头,该功能将“很快”让用户在社区中共享持久的增强现实内容。 Local Lenses承诺创建大规模的点云,以识别一个区域内的多座建筑物,这是该公司先前的地标功能的扩展,用于绘制整个城市街区,这是Immersal和Scape(如今归Facebook拥有)等公司所追求的相同愿景。
与主要专注于地图和营销应用程序的竞争对手不同,Snap计划让用户使用数字内容来改变社区的外观。尽管该功能背后的技术引人入胜,但考虑到当前有关“ Black Lives Matter”运动的社会动荡,Snap如今在推广该功能时感到有些尴尬。该公司表示,Snapchat用户将能够“用彩色油漆装饰附近的建筑物”,这些颜色将对朋友可见。
来源:venturebeat
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息