咋,我不就接個(gè)電話,怎么手機(jī)秒秒鐘變了八百個(gè)樣?!
就在你眼前,蘋果手機(jī)直接變成了復(fù)古電腦。要說這種魔法,特效根本學(xué)不來。
最近,這樣一則短視頻在社交平臺上爆火,揭秘視頻 20 + 萬觀看,5400 + 點(diǎn)贊。
視頻里的這位是一名華人導(dǎo)演。所謂的魔法,正是使用了如今爆火的 Stable Diffusion。
這已經(jīng)不是她第一次用 AI 整花活了。比如街頭時(shí)裝秀。
還參與策劃了世界首張由 AI 設(shè)計(jì)的雜志封面,20 秒內(nèi)即搞定。
如何入侵短視頻?
只需簡單幾步,Stable Diffusion 就可以入侵短視頻。
首先,你得預(yù)設(shè)情節(jié)制作視頻,以本次為例,除了手機(jī)之外全靠自身演技。
接著就來看 Stable Diffusion 是如何“偷梁換柱”的。
據(jù)這次技術(shù)負(fù)責(zé)表示,最難的就是保證其視頻的連續(xù)性。在沒有補(bǔ)幀的情況下,每一幀都是由插值嵌入和可變?nèi)ピ霃?qiáng)度產(chǎn)生的。
這時(shí)候,就需要制定一個(gè)合適的「提示詞、seed 以及去噪強(qiáng)度」組合,以挑選合適的 AI 圖片,第一張和最后一張確定好,去噪強(qiáng)度范圍在 0 到 0.8。
隨后用 Huggingface 定制的擴(kuò)散器管線進(jìn)行轉(zhuǎn)換。不過這過程中還需要一些小技巧調(diào)整修復(fù)蒙版來讓他們之間的轉(zhuǎn)換更加自然。
華人導(dǎo)演用 AI 整花活
在 Karen X.Cheng 的個(gè)人簡介上,就很直白的寫著:導(dǎo)演,分享她的 AI 創(chuàng)意實(shí)驗(yàn)。
而這位華人導(dǎo)演呢,前期僅靠一部手機(jī)拍攝,后期就交給各種 AI,來實(shí)現(xiàn)各種刁鉆的拍攝角度和大成本的特效。
就比如說下面這個(gè)類似無人機(jī)拍攝的場景。
全程沒有用到無人機(jī),她讓一位小哥幫忙拿手機(jī)沿著無人機(jī)的部分關(guān)鍵路徑進(jìn)行拍攝,后期則處理全權(quán)交由 NeRF。
而 AI 處理的過程也不是很復(fù)雜,黑色框是 NeRF 渲染所必需的關(guān)鍵幀,紅色則為最后生成視頻的路徑。
此外,她還用 DAIN 插值模型,通過在圖片之間插入平滑幀,做出了一些酷(sha)炫(diao)的視頻。
甚至有時(shí)想犯犯中二病了,AI 也會(huì)努力打配合。
靠 AI 制作小成本特效視頻也成功帶火了這位華人導(dǎo)演,目前她在 ins 上的粉絲數(shù)已達(dá) 120 多萬。
最近,Karen X 還受扎克伯格之邀,主持 MetaConnect 大會(huì),還與小扎隔空擊了個(gè)掌。
在這之后,Karen X 開始也玩起了 AR 和 VR,前幾天她就聯(lián)合 Meta 創(chuàng)建了一個(gè)可大可小的虛擬世界。
看完這位華人導(dǎo)演的經(jīng)歷,你是不是也心癢癢想試一試用 AI 做視頻呢?
參考鏈接:
[1]https://twitter.com/karenxcheng
[2]https://www.instagram.com/karenxcheng/
本文來自微信公眾號:量子位 (ID:QbitAI),作者:楊凈 Pine
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。