看完阿逗比年度炫技大會,我什么都不敢信了
栗子 乾明 魚羊 發(fā)自 凹非寺
量子位 報道 | 公眾號 QbitAI
一年一度,阿逗比(Adobe)又來炫技了。
許多魔法,曾經(jīng)只在論文里出現(xiàn),沒有給麻瓜玩耍的通道,如今都能一鍵解鎖。
比如,一鍵調(diào)整太陽位置,想讓它從哪升起,它就從哪升起:
比如,一鍵把視頻里人物的姿勢,轉(zhuǎn)移到卡通形象的身上:
不止圖像和視頻可以修,Adobe還發(fā)布了炸裂的純音頻調(diào)教技能,加起來一共有11種魔法。
那么一起來看看吧。
加入音軌,畫中人一鍵對口型
看這張梵高自畫像,有一絲嚴(yán)肅,又有一絲欲言又止。
讓我們來聽聽他想說什么。
△動圖版
△有聲音的視頻在這里
Historial paintings in other art work from centuries ago can be animated with just my voice.
僅憑我的聲音,就能讓幾個世紀(jì)前的其他藝術(shù)作品動起來。
是的,有了這個名叫Sweet Talk的功能,只要加入一段語音,無論是圖片、照片,還是經(jīng)典畫作,原本靜止的畫中人都能自動對上口型,動起來。
不僅是嘴巴動,眼睛鼻子甚至整個頭部,都因這一句話而被賦予了自然的動態(tài)。
哪怕只是簡筆畫,也不在話下。
感覺可以突破次元壁,跟二次元老婆直接聊天了呢……
你怎么動,它就怎么動
這是另一項穿破次元壁的技能。
從前,你想按照一段視頻去做動畫,每一幀都要手動調(diào)姿勢:
△ 奇怪的部位 (誤)
如果視頻有10分鐘,一分鐘60秒,每秒20幾幀,那真的太累了。
但現(xiàn)在,Adobe自家研發(fā)的AI引擎Adobe Sensei可以幫你把視頻里的動作,一口氣遷移到動畫里去。
只要在一幀里面,把主角圈起來,AI就會標(biāo)記出全身的18個關(guān)鍵點。然后,整個視頻里主角的運(yùn)動軌跡,AI就都追蹤到了:
把這18個關(guān)鍵點的追蹤結(jié)果,和動畫形象身上的部位對應(yīng)起來,就可以讓它瞬間復(fù)刻視頻里的動作:
不用再一幀一幀修改姿勢,可以節(jié)省不少時間。
另外,這個技能的用法還有很多,也不一定要把18個點都用到。
比如,只用右手腕上那一個點,就可以把幕布切開,進(jìn)入下一個場景:
這是一個籃球場,所以當(dāng)然是讓卡通人來打籃球:
但由于研究人員Jimei Yang自覺籃球技能不足,決定拉主持人來墊背 (注意右下角,動作是研究人員做的) :
沒投中,生氣了,開始燃燒了。背后的火光,也是靠動作追蹤來實現(xiàn)的。
對此,主持人表示可以:
素描一鍵變照片
隨手畫出一只鳥的輪廓,再配上任意一張真鳥的照片,Image Tango這個功能就能一鍵生成一只全新的飛鳥。
毫無違和感,就像真實的鏡頭記錄下的照片。不事先說明,誰能想到,世界上其實并不存在這樣一只漂亮小鳥呢?
這一功能依賴于Adobe Sensei來實現(xiàn),并且不僅僅是把紋理填進(jìn)新的輪廓當(dāng)中,Image Tango還能創(chuàng)造出更多不同的姿態(tài)。
不止可以創(chuàng)造“新物種”,Image Tango說不定還將成為電商福音。
比如,你喜歡這條裙子的剪裁,但又希望它有另一件衣服的花色,就把兩件衣服的照片都丟給Image Tango:
感覺可以直接把新衣服丟進(jìn)購物車了~
神奇字體,iPad動字也變
設(shè)計當(dāng)中,當(dāng)然少不了花式字體。這一次,Adobe又帶來了“拯救設(shè)計師”系列。
這些炫酷的字體效果,都只要打開parameters開關(guān),調(diào)節(jié)幾個拉桿,就能輕松實現(xiàn)。
甚至,能借助iPad的加速計和陀螺儀,當(dāng)iPad晃動起來,字體也跟著搖擺。
△iPad動,字也動
創(chuàng)作簡單了不止一點點。
照片光線隨心變
上午在一個小城旅行,下午就走了,拍不到夕陽西下的樣子怎么辦?
不要緊,只要把照片發(fā)進(jìn)去,再用滑塊調(diào)整一下陽光的位置,一整天的樣子都可以解鎖。
這是調(diào)水平方向:
這是在調(diào)高度角,中午就在頭頂,傍晚就在地平線上:
以我之名,想讓太陽從哪里升起,它就從哪里升起。
把太陽的位置調(diào)得越來越靠近地平線,建筑物的色彩也越暗淡,獲得太陽落山的漸變效果。
所有的影子,都是AI自動生成的。
那么問題來了,要生成逼真的影子,AI必須知道物體的3D形狀,只用一張正面圖不夠吧?
所以,這里用了多個角度的照片,幫算法了解物體的形狀。
這樣說來,AI不止能修圖,修視頻才更加得天獨厚。不同的幀,就拍下了不同的角度,可以直接拿來用:
△ 調(diào)光前
就算是10秒之內(nèi)拍出的視頻,也能做出一天的光線變化了:
△ 調(diào)光后
那么,如果去旅行的時候,沒有想到要拍那么多角度的照片,怎么辦呢?
AI會幫你搜索別人拍過的圖像,從那里學(xué)到3D形狀。
所以,就算你只有早上的一張照片,也能看到黃昏時的小城了:
一鍵去除背景噪音
有時候,明明感覺在安靜的環(huán)境里錄音,卻錄到了嘈雜的背景音。
那么,用Sensei自帶的Awesomize一鍵去除吧。轟轟的雜音不見了,清晰的聲音娓娓道來,講起故事更加絲滑了。視頻演示在這里:
這段視頻里,還有第二個例子。研究人員Zeyu Jin在一個會議室里面,練習(xí)自己的演講。講到一半,卻發(fā)現(xiàn)有人訂了房間。
于是,他又去到了一個不那么安靜的地方,繼續(xù)練習(xí)。但這樣得到了錄音,可以聽出是在不同的地方錄下的。
這時候,依然是用Awesomize一鍵修整,電話的聲音不見了,辦公場所勞碌的聲音也不見了,就像從來沒有離開過安靜的會議室。
整個清理過程,完全不用手動標(biāo)注哪些波形需要去除,都靠AI的自覺。
一鍵識別刪除特定聲音
但有些時候,你不想聽到的不僅僅只是背景噪音。
講話時,有的人可能會因為緊張等緣故,呃,說兩句就會有個“呃”。
這是很常見的情況。呃。
如果一場講話兩小時,里面都是“呃”,啥感覺?
但有了SoundSeek的功能,只需要選中其中一個“呃”的波形,點擊分析,AI就會幫你找出全部的“呃” (下圖紅色波峰) 。再來一鍵移除:
整段音頻里,所有的“呃”都不見了!
下面的視頻,詳細(xì)展示了這項技能的奇效:
在給自己媽媽錄生日祝福的時候,旁邊討厭的司機(jī)一直摁喇叭,結(jié)果整個音頻中都是鳴笛聲。
同樣,只要選擇其中一聲,就能把所有鳴笛聲都干掉。
快速AR創(chuàng)作
↑↑↑
在視頻里加入這樣的AR效果,需要幾個步驟?
Pronto這個項目,旨在讓這件事變得更加簡單便捷。
首先,錄制一段視頻。
Pronto可以在iPad的屏幕里,顯示平板的位置移動。
當(dāng)你在空間里選定一個位置,輕輕一點,就會出現(xiàn)一個畫板 (藍(lán)色網(wǎng)格) ,讓你在選好的地方畫畫了。手繪一個“Hi!”,再設(shè)置好時間。
只要時間一到,小蛋糕會跟你打招呼,對話氣泡就像真實存在在物理空間中一樣:
就算不手繪,加入已有的素材,一樣沒什么問題。如果想要再添加一些動作,比如實現(xiàn)上面那個拉開條幅的效果,在關(guān)鍵幀點擊一下左側(cè)的Enact鍵,設(shè)置一下就可以了。
不怕沒人幫忙拍合影
節(jié)假日和家人一起出去玩,要是沒有熱心路人幫忙拍照,就總有一個人不能在合影里面。
這個名為AllinSneak的功能,直擊這個痛點。
Adobe的工程師小姐姐有個煩惱:和家人一起出去玩,拍照片時自己和丈夫總是不能同框。
怎么辦呢?幾行代碼就能搞定。
基于人工智能的算法能夠自動識別相同的場景中,合影中少了誰,就把她摳出來:
接著P到合影中去。
一家人整整齊齊。
不需要人趴在電腦屏幕前,一點點描邊摳圖,非常簡單。
人人都是藝術(shù)家
從前,藝術(shù)家們操縱光影的技法,普通人類難以企及:
不過現(xiàn)在,有了一只能讓每個人都變成藝術(shù)家的AI。
第一步,畫個長方形做背景,把它放到AI的光影世界里,就會先變成黑色,因為還沒加光源。
要讓暗黑的背景亮起來,就在前面畫個燈箱。燈箱原本是普通的白色長方形,但只要一鍵讓它發(fā)光,就能照亮黑暗:
當(dāng)然,如果只是有光,也會顯得有些單調(diào)。
那么,我們畫一道波浪線吧。一鍵往波浪線身后加上黑色漸變,線條就會成為一道縫隙,讓來自地底黑暗世界的氣息,從縫里噴薄而上:
以上,只是最初步的演示,下面來給一幅畫加上光影吧。
一只熱氣球飛在云層里,原本并不知道光從哪邊來:
所有的顏色都平鋪直敘,這不是我們想要的。
想要明暗變化,就在左邊和上邊,放兩條光源:
左上角比右下角亮了許多。
如果想把光線改個方向,只要移動藍(lán)色線條的位置,就是移動光源了。
有了這些,每個人都可以做出絢爛的設(shè)計。
不信的話,來看個一分鐘內(nèi)做完的“畢設(shè)”:
中間,是研究人員Jakub Fiser自己的剪影,可以陶醉一整天。
“反向PS”利器,一秒回到P圖前
一鍵識別PS痕跡,還能一鍵還原P圖前是什么樣子。
這不是砸自家場子嗎?
演示的小哥哥,拿著主持人的照片,現(xiàn)場展示了從P圖到識別,再到還原的全過程。
先把眼睛放大:
然后把嘴角上揚(yáng),哈哈哈哈:
把P過的圖交給AI鑒定,得出結(jié)論:100%修過。
不止如此,熱力圖還可以顯示P過哪里:
能夠檢測P圖,已經(jīng)夠讓人心累了。更慘烈的是,能夠一鍵回到P圖前:
這復(fù)原效果,和原圖幾乎無差。
至于其中具體的原理,我們曾進(jìn)行過論文解讀,傳送門在這:
一秒回到P圖前:Adobe發(fā)布“反向PS”利器,知道你修過哪里,還幫你修回去
看完這些功能,不知道你是啥感覺,反正我們辦公室有個小編,嘴里就只?!芭P槽”了。
Adobe說,在不遠(yuǎn)的將來,這些功能可能會出現(xiàn)在Adobe全家桶里面,可能是作為新增功能,也可能會推出新的產(chǎn)品。
比如去年MAX大會上的這個AI剪片,畫面自動跟著主角跑的技術(shù),今年就正式在Pr(Premiere Pro)上登陸了。
所以,你期待嗎?
最后,推薦大家去看完整炫技現(xiàn)場視頻:
https://bit.ly/32qLGVz
—?完?—