AccordHK · Blog

AccordHK · 實踐筆記

超強免費影相App! 免去背直接「剪貼」物件到Photoshop

在Photoshop剪裁需要的影像,大家通常都會使用手動為主的「套索工具」或有一定AI支援的「快速選取工具」來勾勒出所需影邊緣來建立選取範圍。但有了法國開發的此AR手機App,用家可以跳過這個需要小心翼翼的去背程序了。 法國巴黎程式員Cyril Diagne身兼藝術家同設計師身份。Diagne近日在個人Twitter分享他開發的AR 擴增實境技術手機App的使用短片示範,它竟然能做到「剪貼現實」。 你沒看錯,Cyril Diagne此隻AR手機的App同時具有機器學習 (Machine learning)技術,可以將手機鏡頭拍底的現實物件(圖中盆栽)直接複製成AR影像物件,並貼上Photoshop之類修圖軟體。只要手機鏡頭面對着電腦螢幕,AR物件運行一會後便會出現在圖像編輯軟體介面上。 無人可以百份百肯定Cyril Diagne這支影片是真正的手機App使用情況,可能只是以特技後製呈現的CG範例。不過Diagne絕非吹牛,相關手機App開發概念已發佈到GitHub。Diagne表示應用程式目前處於原型階段,它結合了AR和BASNet機器學習技術,把影像「複製」和「貼上」的步驟是分開,各有不同技術原理來達成。 簡單講,用手機鏡頭拍攝照片時,BASNet機器學習支援的AI人工智能會自動識別,再以AR物件形式剪裁出現實世界中的物體,此程序是之為「複製」。接下來,BASNet跟另一種稱為OpenCV SIFT的技術結合,令手機和電腦同步,從而讓用家只要把手機對準電腦螢幕上顯示的執圖軟件指定位置,即可完成「貼上」程序。 所有這些技術和操作機制都整合到Diagne為其手機設計的App中,結果令人震驚。手機將影像AR物件自現實世界「裁切」出來大約需要2.5秒,而將物件黏貼到Photoshop文檔中,則只需要4秒。 AR物件剪貼背後的程式代碼可於GitHub上下載,但要注意代碼目前只屬研究原型,而不是面向普羅大眾消費者的功能。如果Adobe未來真的把此App整合至Photoshop中,絕對是用家之福。 原文網址:https://bit.ly/2YO4cZF

Stock photo
Photo: Pexels

重點摘要

Cyril Diagne的AR手機App原型結合BASNet機器學習與OpenCV SIFT技術,可用手機鏡頭複製現實物件並直接貼上Photoshop,無須手動去背。裁切約需2.5秒,貼上約需4秒,但代碼目前只屬研究原型。

在Photoshop剪裁需要的影像,大家通常都會使用手動為主的「套索工具」或有一定AI支援的「快速選取工具」來勾勒出所需影邊緣來建立選取範圍。但有了法國開發的此AR手機App,用家可以跳過這個需要小心翼翼的去背程序了。

法國巴黎程式員Cyril Diagne身兼藝術家同設計師身份。Diagne近日在個人Twitter分享他開發的AR 擴增實境技術手機App的使用短片示範,它竟然能做到「剪貼現實」。

你沒看錯,Cyril Diagne此隻AR手機的App同時具有機器學習 (Machine learning)技術,可以將手機鏡頭拍底的現實物件(圖中盆栽)直接複製成AR影像物件,並貼上Photoshop之類修圖軟體。只要手機鏡頭面對着電腦螢幕,AR物件運行一會後便會出現在圖像編輯軟體介面上。

無人可以百份百肯定Cyril Diagne這支影片是真正的手機App使用情況,可能只是以特技後製呈現的CG範例。不過Diagne絕非吹牛,相關手機App開發概念已發佈到GitHub。Diagne表示應用程式目前處於原型階段,它結合了AR和BASNet機器學習技術,把影像「複製」和「貼上」的步驟是分開,各有不同技術原理來達成。

簡單講,用手機鏡頭拍攝照片時,BASNet機器學習支援的AI人工智能會自動識別,再以AR物件形式剪裁出現實世界中的物體,此程序是之為「複製」。接下來,BASNet跟另一種稱為OpenCV SIFT的技術結合,令手機和電腦同步,從而讓用家只要把手機對準電腦螢幕上顯示的執圖軟件指定位置,即可完成「貼上」程序。

所有這些技術和操作機制都整合到Diagne為其手機設計的App中,結果令人震驚。手機將影像AR物件自現實世界「裁切」出來大約需要2.5秒,而將物件黏貼到Photoshop文檔中,則只需要4秒。

AR物件剪貼背後的程式代碼可於GitHub上下載,但要注意代碼目前只屬研究原型,而不是面向普羅大眾消費者的功能。如果Adobe未來真的把此App整合至Photoshop中,絕對是用家之福。

原文網址:https://bit.ly/2YO4cZF

常見問題

Cyril Diagne的AR手機App有什麼功能?

它可以利用手機鏡頭將現實物件(例如盆栽)複製成AR影像物件,並貼上Photoshop等修圖軟件,讓用家免去小心翼翼的手動去背程序。

這個App的「複製」和「貼上」是如何運作的?

「複製」由BASNet機器學習支援的AI自動識別物件,並以AR物件形式剪裁出來。「貼上」則結合BASNet與OpenCV SIFT技術令手機和電腦同步,用家只要把手機對準電腦螢幕上的指定位置即可完成。

這個App的速度有多快?

根據文章,手機將物件自現實世界裁切出來大約需要2.5秒,而貼到Photoshop文檔中則只需要4秒。

一般用家現在可以使用這個App嗎?

暫時未可。文章指應用程式目前處於原型階段,GitHub上的代碼只屬研究原型,並非面向普羅大眾消費者的功能。

更多 AccordHK 文章。

AccordHK

把下一步化為實際行動。

與 AccordHK 探討軟件交付、人工智能工作流程或專題培訓。

✆