重点摘要
Cyril Diagne的AR手机App原型结合BASNet机器学习与OpenCV SIFT技术,可用手机镜头复制现实物体并直接粘贴到Photoshop,无需手动抠图。裁切约需2.5秒,粘贴约需4秒,但代码目前只是研究原型。
在Photoshop中裁剪所需的图像时,大家通常会使用以手动操作为主的“套索工具”,或带有一定AI辅助功能的“快速选择工具”,来勾勒所需图像的边缘以创建选区。但有了这款法国开发的AR手机App,用户可以省去这个需要小心翼翼的抠图步骤了。
法国巴黎的程序员Cyril Diagne同时也是艺术家和设计师。Diagne近日在个人Twitter上分享了他开发的AR(增强现实)技术手机App的演示视频,它竟然能够做到“剪贴现实”。
你没看错,Cyril Diagne的这款AR手机App同时具备机器学习(Machine learning)技术,可以将手机镜头拍到的现实物体(视频中的盆栽)直接复制为AR图像对象,并粘贴到Photoshop之类的修图软件中。只要手机镜头对准电脑屏幕,过一会儿AR对象就会出现在图像编辑软件的界面上。
没有人能百分之百确定Cyril Diagne的这段视频是真实的手机App使用情况,也可能只是通过特效后期制作呈现的CG示范。不过Diagne绝非吹牛,相关手机App的开发构想已发布到GitHub上。Diagne表示,该应用程序目前处于原型阶段,它结合了AR和BASNet机器学习技术,将图像“复制”和“粘贴”的步骤分开,各自通过不同的技术原理来实现。
简单来说,用手机镜头拍摄照片时,由BASNet机器学习支持的AI人工智能会自动识别,再以AR对象的形式把现实世界中的物体裁剪出来,这个过程称为“复制”。接下来,BASNet与另一种名为OpenCV SIFT的技术相结合,使手机和电脑同步,用户只需把手机对准电脑屏幕上显示的修图软件中的指定位置,即可完成“粘贴”过程。
所有这些技术和操作机制都整合到了Diagne为自己的手机设计的App中,效果令人震惊。手机将图像AR对象从现实世界中“裁切”出来大约需要2.5秒,而将对象粘贴到Photoshop文档中则只需要4秒。
AR对象剪贴背后的程序代码可以在GitHub上下载,但要注意,该代码目前只是研究原型,而不是面向普通大众消费者的功能。如果Adobe未来真的把这款App整合到Photoshop中,绝对是用户的福音。
原文网址:https://bit.ly/2YO4cZF