Snap的镜头工作室现在支持自定义ML驱动的Snapchat镜头
在过去的几年中，Snapchat不断增长的Lenses集合已成为智能手机支持的增强现实的最佳范例，使用户能够毫不费力地在照片中添加面部修饰，环境效果和特定位置的滤镜。现在，母公司Snap使创作者能够在Lenses中使用自行提供的机器学习模型，并希望该计划能激发ML开发人员和创意人员之间的合作伙伴关系。
今天的主要变化是对Lens Studio的更新，Lens Studio是用于创建Snapchat大部分AR滤镜的免费桌面开发应用程序。一项名为SnapML的新功能(与IBM的同名培训工具无关)将使开发人员可以将机器学习模型导入电动镜片，从而扩大Snapchat能够立即识别的现实对象和身体部位的范围。作为该技术的一个示例，Lens Studio将包含Wannaby开发的新的脚部追踪ML模型，使开发人员能够为脚部制作Lenses。
对于Snap来说，挑战将是吸引ML开发人员进入Lens创意库，因为开发人员可能不会立即为其训练有素的神经网络立即提供明显的商业应用程序，而Lens的创建者(营销人员)可能只是在等待可以跟踪脚的事物，因此他们可以让人们虚拟地试穿鞋子。Snap的Eitan Pilipski告诉VentureBeat，该公司将“促进创作者与ML开发人员建立联系，以便他们可以共同构建体验，”使双方能够专注于自己的长处，而不是试图融入彼此不太舒适的通道。
除Wannaby之外，包括CV2020，视觉滤镜制造商Prisma和几位未具名的Lens创造者在内的开发人员也正在开发基于SnapML的滤镜。Lens Studio还添加了新的手势模板，以及“面部地标”和“面部表情”，这些模板可以改善特定情况下的面部跟踪。此外，面向用户的Snapchat应用将扩展其“扫描”功能，使其能够识别所有已知植物和树木的90%，近400种狗，包装的食品标签和路易威登的徽标，以及SoundHound集成，以使用户能够找到仅使用语音命令的相关镜头。
Snap也正在预览一项新功能，即本地镜头，该功能将“很快”让用户在社区中共享持久的增强现实内容。Local Lenses承诺创建大规模的点云，以识别一个区域内的多座建筑物，这是该公司先前的地标功能的扩展，用于绘制整个城市街区，Immersal和Scape(现在归Facebook拥有)等公司所追求的相同愿景。与主要专注于地图和营销应用程序的竞争对手不同，Snap计划让用户使用数字内容来改变社区的外观。
尽管该功能背后的技术引人入胜，但考虑到当前有关“Black Lives Matter”运动的社会动荡，Snap如今推广它的方式有些尴尬。该公司表示，Snapchat用户将能够“用彩色油漆装饰附近的建筑物”，这些颜色将对朋友可见。尽管其示例视频与Sega的Jet Set Radio相比更像是Nintendo的Splatoon，使用的是大量的彩色飞溅而不是书面文字，但我们必须查看Local Lenses是否仅用于正面目的，还是迈向类似于AR涂鸦的步骤随着抗议活动的继续，现实城市中目前正在发生什么。
