0
本文作者: 李詩 | 2017-12-12 16:53 |
(谷歌Storyboard)
又一個(gè)好玩的裝逼P圖應(yīng)用來襲,這個(gè)應(yīng)用還來自谷歌。
雷鋒網(wǎng)獲悉,谷歌今日發(fā)布AI圖像處理應(yīng)用Storyboard(Android)。該應(yīng)用可以從視頻中自動(dòng)選取有趣的幀,然后將每幀的照片轉(zhuǎn)換為漫畫風(fēng)格。目前有六種漫畫風(fēng)格可選,轉(zhuǎn)換的時(shí)間只需要幾秒。
(谷歌Storyboard)
雷鋒網(wǎng)發(fā)現(xiàn),由于是第一個(gè)版本,Storyboard功能還很單薄。用戶只能上傳視頻然后等待轉(zhuǎn)換出來的效果,沒有辦法自己選擇幀來安排漫畫的內(nèi)容,也沒辦法進(jìn)行后期編輯,例如加上文字,編寫漫畫故事。但是即使沒有這些功能,Storyboard依然很可能刷爆Instagram、Facebook和朋友圈。
(Prisma)
Storyboard與去年火爆朋友圈的Prisma是異曲同工。
Prisma能在十幾秒內(nèi)將普通照片轉(zhuǎn)換成名畫風(fēng)格。Prisma不僅深得用戶喜歡,其采用的黑科技也獲得業(yè)界的矚目。Prisma主要采用了CNN(卷積神經(jīng)網(wǎng)絡(luò)技術(shù))來將用戶上傳的圖片的內(nèi)容和風(fēng)格進(jìn)行分離和重新組合,再將名畫的風(fēng)格轉(zhuǎn)換到用戶圖片中。Prisma火爆的原因在于其巧妙地利用了深度神經(jīng)網(wǎng)絡(luò)抽取高層圖片表達(dá)的能力,而此前非深度學(xué)習(xí)的方法只能獲取到目標(biāo)圖片低層次的圖片特征,無法獨(dú)立的對圖片的語意內(nèi)容和風(fēng)格的變化進(jìn)行有效地建模和合成。
然而,Prisma好景不長,和臉萌這一類工具類應(yīng)用一樣,大家玩了一陣就膩了。如今,Prisma將重心轉(zhuǎn)移到了B2B,為開發(fā)者提供SDK。
但是,Prisma引爆的圖片藝術(shù)風(fēng)格轉(zhuǎn)換的潮流卻沒有消退。人工智能領(lǐng)域引起革命的深度學(xué)習(xí)技術(shù)已經(jīng)將眾多任務(wù)推向了實(shí)用的水平,各大巨頭公司也積極布局機(jī)器視覺和圖像處理領(lǐng)域。
在Prisma大火的三個(gè)月后,谷歌發(fā)布了一種新的遷移網(wǎng)絡(luò)(來自其論文《A Learned Representation for Artistic Style》)同時(shí)學(xué)習(xí)多種風(fēng)格的簡單方法,可以讓單個(gè)深度卷積風(fēng)格遷移網(wǎng)絡(luò)同時(shí)學(xué)習(xí)多種藝術(shù)風(fēng)格。這種方法能實(shí)現(xiàn)實(shí)時(shí)的風(fēng)格插補(bǔ),其不僅可以應(yīng)用于靜態(tài)圖像,還可應(yīng)用于視頻中。
在實(shí)際使用中,用戶可使用13種不同的繪畫風(fēng)格,通過滑塊調(diào)整這些風(fēng)格的相對強(qiáng)度。多種風(fēng)格實(shí)時(shí)結(jié)合到一起,最后得到一個(gè)輸出。與之前快速遷移風(fēng)格的方法不同,這種同時(shí)建模多種風(fēng)格的方法讓用戶能實(shí)時(shí)與風(fēng)格遷移算法進(jìn)行交互,而且可以基于多個(gè)風(fēng)格的混合進(jìn)行自由創(chuàng)造。
此次的Storyboard想必是谷歌對此技術(shù)的應(yīng)用。
Prisma專注于西方名畫,在名畫風(fēng)格上有深度的積累,谷歌選擇漫畫風(fēng)格則是另辟蹊徑。從谷歌的技術(shù)積累來看,Storyboard不久應(yīng)該就能迭代出編輯功能,用戶就可以根據(jù)自己的想法創(chuàng)建漫畫。
值得一提的是,谷歌在今年8月還收購了一家俄羅斯計(jì)算機(jī)視覺公司AIMatter,其主要產(chǎn)品是圖像濾鏡Fabby。最強(qiáng)大的功能是“摳圖”,將照片中的對象從背景中區(qū)分出來,可以快速地跟換背景。除了美圖秀秀等圖片美化編輯器都有的降噪、化妝、臉部美容等,F(xiàn)abby還有性別識別、面部識別等功能。
(AIMatter)
其實(shí),谷歌于2015年推出的"谷歌Photos"就應(yīng)用了人工智能,其人工神經(jīng)網(wǎng)絡(luò)訓(xùn)練系統(tǒng)可以對海量的圖像數(shù)據(jù)進(jìn)行搜索,識別照片中的人和物體。Storyboard或許也會應(yīng)用在谷歌Photos中。
除Google以外,F(xiàn)acebook也跟進(jìn)了AI在圖像處理的應(yīng)用。2017年1月,為了讓你在用手機(jī)拍攝視頻時(shí),有種手持梵高畫筆的奇妙感受,F(xiàn)acebook首創(chuàng)了一個(gè)全新的深度學(xué)習(xí)移動(dòng)平臺——Caffe2go。利用Caffe2go,處理的照片不用再上傳到服務(wù)器,在手機(jī)上就能進(jìn)行風(fēng)格轉(zhuǎn)換算法,完成對像素特征的實(shí)時(shí)提取、分析和處理。Prisma的圖片處理需要等待十幾秒,而有了Caffe2go,F(xiàn)acebook可以對拍攝的視頻進(jìn)行實(shí)時(shí)的風(fēng)格轉(zhuǎn)換。但是從官方公布的視頻來看,每一幀的效果都不一樣,人物也變得模糊,效果并不好。
(Caffe2go)
除了Storyboard以外,谷歌還同時(shí)發(fā)布了Selfissimo!(iOS | Android)和 Scrubbies(iOS),這兩款應(yīng)用沒有那么黑科技,但是卻還是有使用價(jià)值。
Selfissimo!是一款自動(dòng)拍攝照片的應(yīng)用,點(diǎn)擊屏幕啟動(dòng)拍攝后,每當(dāng)你擺好一個(gè)動(dòng)作(靜止下來),系統(tǒng)就會自動(dòng)按下快門??上壳爸荒芘臄z黑白照片。
Scrubbies可以通過單指、雙指左右拖動(dòng)來實(shí)現(xiàn)視頻畫面的回放/快放循環(huán)。
在雷鋒網(wǎng)看來,人們拍攝、記錄、編輯和分享圖片的欲望是無限的,技術(shù)和應(yīng)用的創(chuàng)新如何去滿足這些欲望讓人期待。而就在近幾天,美圖秀秀也推出了”繪畫機(jī)器人“,用人工智能的辦法將普通的人臉照片變成漫畫風(fēng)格。但是這個(gè)效果卻似乎沒有Prisma當(dāng)初那樣火爆。
除了人工智能技術(shù)的不斷進(jìn)步以外,如何找到真正有創(chuàng)意、有價(jià)值的應(yīng)用方式或許更為重要。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。