設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

Stable Diffusion 入侵短視頻,導(dǎo)演玩得太 6,小扎都來請她

量子位 2022/11/9 19:43:04 責(zé)編:遠(yuǎn)生

咋,我不就接個(gè)電話,怎么手機(jī)秒秒鐘變了八百個(gè)樣?!

就在你眼前,蘋果手機(jī)直接變成了復(fù)古電腦。要說這種魔法,特效根本學(xué)不來。

最近,這樣一則短視頻在社交平臺上爆火,揭秘視頻 20 + 萬觀看,5400 + 點(diǎn)贊。

視頻里的這位是一名華人導(dǎo)演。所謂的魔法,正是使用了如今爆火的 Stable Diffusion。

這已經(jīng)不是她第一次用 AI 整花活了。比如街頭時(shí)裝秀。

還參與策劃了世界首張由 AI 設(shè)計(jì)的雜志封面,20 秒內(nèi)即搞定。

如何入侵短視頻?

只需簡單幾步,Stable Diffusion 就可以入侵短視頻。

首先,你得預(yù)設(shè)情節(jié)制作視頻,以本次為例,除了手機(jī)之外全靠自身演技。

接著就來看 Stable Diffusion 是如何“偷梁換柱”的。

據(jù)這次技術(shù)負(fù)責(zé)表示,最難的就是保證其視頻的連續(xù)性。在沒有補(bǔ)幀的情況下,每一幀都是由插值嵌入和可變?nèi)ピ霃?qiáng)度產(chǎn)生的。

這時(shí)候,就需要制定一個(gè)合適的「提示詞、seed 以及去噪強(qiáng)度」組合,以挑選合適的 AI 圖片,第一張和最后一張確定好,去噪強(qiáng)度范圍在 0 到 0.8。

隨后用 Huggingface 定制的擴(kuò)散器管線進(jìn)行轉(zhuǎn)換。不過這過程中還需要一些小技巧調(diào)整修復(fù)蒙版來讓他們之間的轉(zhuǎn)換更加自然。

華人導(dǎo)演用 AI 整花活

在 Karen X.Cheng 的個(gè)人簡介上,就很直白的寫著:導(dǎo)演,分享她的 AI 創(chuàng)意實(shí)驗(yàn)

而這位華人導(dǎo)演呢,前期僅靠一部手機(jī)拍攝,后期就交給各種 AI,來實(shí)現(xiàn)各種刁鉆的拍攝角度和大成本的特效。

就比如說下面這個(gè)類似無人機(jī)拍攝的場景。

全程沒有用到無人機(jī),她讓一位小哥幫忙拿手機(jī)沿著無人機(jī)的部分關(guān)鍵路徑進(jìn)行拍攝,后期則處理全權(quán)交由 NeRF。

而 AI 處理的過程也不是很復(fù)雜,黑色框是 NeRF 渲染所必需的關(guān)鍵幀,紅色則為最后生成視頻的路徑。

此外,她還用 DAIN 插值模型,通過在圖片之間插入平滑幀,做出了一些酷(sha)炫(diao)的視頻。

甚至有時(shí)想犯犯中二病了,AI 也會(huì)努力打配合。

靠 AI 制作小成本特效視頻也成功帶火了這位華人導(dǎo)演,目前她在 ins 上的粉絲數(shù)已達(dá) 120 多萬。

最近,Karen X 還受扎克伯格之邀,主持 MetaConnect 大會(huì),還與小扎隔空擊了個(gè)掌。

在這之后,Karen X 開始也玩起了 AR 和 VR,前幾天她就聯(lián)合 Meta 創(chuàng)建了一個(gè)可大可小的虛擬世界。

看完這位華人導(dǎo)演的經(jīng)歷,你是不是也心癢癢想試一試用 AI 做視頻呢?

參考鏈接:

  • [1]https://twitter.com/karenxcheng

  • [2]https://www.instagram.com/karenxcheng/

本文來自微信公眾號:量子位 (ID:QbitAI),作者:楊凈 Pine

廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:AI,Stable Diffusion

軟媒旗下網(wǎng)站: IT之家 最會(huì)買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會(huì)買 要知