近日,Adobe 發(fā)布了自家的 AI 圖像生成模型套件 Adobe Firefly,正式入局 AIGC 戰(zhàn)場。
AI 的 iPhone 時刻已來。
GTC 大會上,老黃官宣,和 Adobe 公開人工智能生成圖像工具 Firefly(螢火蟲)。
公告稱,F(xiàn)irefly 已經(jīng)集成在 Adobe 的企業(yè)級創(chuàng)意工具 Adobe Express 中進行內(nèi)測,僅開放了藝術(shù)字功能。
目前,還沒有開放給用戶使用,但可以申請候補。
未來,這一工具將加入到 Adobe 旗下的 Photoshop、Illustrator 以及 Premiere 等。
「有了螢火蟲,每個人都能用他們自己的語言來創(chuàng)造他們夢想的內(nèi)容。」
「螢火蟲」飛入 AIGC 戰(zhàn)局
當(dāng)前,F(xiàn)irefly 提供兩個模式,一種是利用文字生成圖像的功能,另一種是字體效果編輯。
在畫圖上,F(xiàn)irefly 和目前流行的 AI 繪圖工具類似,能夠根據(jù) prompt 生成圖像,并提供數(shù)百種風(fēng)格并對結(jié)果進行調(diào)整。
另外,F(xiàn)irefly 還可根據(jù)周邊內(nèi)容生成圖像,這使用戶可以更有效地測試和完善圖像效果。
在圖形設(shè)計和插圖工作中,自定義矢量、畫筆和紋理可以從幾個單詞甚至草圖生成,并能夠編輯使用熟悉的工具創(chuàng)建的內(nèi)容。
除了基本的文本到圖像的生成,F(xiàn)irefly 模型可以像 Prisma 一樣將不同的風(fēng)格「轉(zhuǎn)移」到現(xiàn)有的圖像上。根據(jù)用戶提供的描述,它還可以將樣式或紋理應(yīng)用于字母和字體。
而創(chuàng)意文字工具上,人們可以創(chuàng)作看起來毛茸茸、鱗片等各種形態(tài)和效果的文字,類似 Office 中的「藝術(shù)字」功能。
Firefly 還可以改變 3D 建模,比如快速生成模型風(fēng)格、材質(zhì):
Firefly 目前能產(chǎn)生的最大分辨率的圖片為 2000*2000 像素。
此外,F(xiàn)irefly 目前仍在探索其他的功能,包括文字生成矢量 / 筆刷 / 模板、根據(jù)自己的風(fēng)格生成圖像、指定縱橫比擴展圖像、根據(jù) 3D 模型生成圖像等等。
「無原罪」模型
在此,Adobe 表示,F(xiàn)irefly 模型創(chuàng)建的作品將包含元數(shù)據(jù),以證明它是部分或全部由人工智能生成的。
這樣做的原因主要是為了維護藝術(shù)家版權(quán)問題。
就技術(shù)來講,F(xiàn)irefly 與 DALL-E2,以及 Stable Diffusion 之類的文本到圖像的 AI 沒有什么不同。
這些 AI 模型通過學(xué)習(xí)來訓(xùn)練現(xiàn)有的圖像從文本提示生成新的圖像,這些圖像通常來自數(shù)據(jù)集,這些數(shù)據(jù)集是通過搜索公共圖像托管網(wǎng)站拼湊在一起的
這些 AI 模型可以通過在現(xiàn)有圖像上「訓(xùn)練」,從文本提示中「學(xué)習(xí)」生成新的圖像。
這些現(xiàn)有圖像通常來自于通過搜索公共圖像托管網(wǎng)站所獲取的數(shù)據(jù)集。
一些專家認為,在美國,使用公共圖像(即使是受版權(quán)保護的)來訓(xùn)練模型將受到合理使用原則的保護。但是,這是一個不太可能在短時間內(nèi)得到解決的問題。
此前,Midjourney 和 Stability AI,因?qū)⑺鼈兊墓ぞ哂糜诰W(wǎng)絡(luò)抓取的圖像而被指控侵犯了數(shù)百萬藝術(shù)家的權(quán)利,面臨法律訴訟。
據(jù)報道,庫存圖片供應(yīng)商 Getty Images 已將 Stability AI 單獨告上法庭,指控其未經(jīng)許可使用其網(wǎng)站上數(shù)百萬張圖片來訓(xùn)練藝術(shù)生成模型 Stable Diffusion。
除了有關(guān)藝術(shù)家和平臺報酬的未解決問題之外,生成式人工智能面臨的一個更加緊迫的問題:
它傾向于使用復(fù)制圖像、文本等內(nèi)容,包括版權(quán)內(nèi)容,而這些內(nèi)容都來自于用于訓(xùn)練模型的數(shù)據(jù)。
一些圖像托管平臺已經(jīng)禁止使用 AI 生成的內(nèi)容,因為他們擔(dān)心會引起法律糾紛。
專家警告說,如果企業(yè)無意中將生成的 AI 工具所生成的受版權(quán)保護的內(nèi)容納入他們銷售的任何產(chǎn)品中,這些企業(yè)可能會面臨風(fēng)險。
對此,Adobe 的解決方案是,僅使用公司的免版稅媒體庫 Adobe Stock,以及經(jīng)過版權(quán)公開授權(quán)和公共領(lǐng)域內(nèi)容,訓(xùn)練 Firefly 模型。
Adobe 表示,未來用戶將能夠使用自己的內(nèi)容訓(xùn)練和微調(diào) Firefly 模型,使其輸出具有特定的風(fēng)格和設(shè)計語言。
參考資料:
https://www.adobe.com/sensei/generative-ai/firefly.html
本文來自微信公眾號:新智元 (ID:AI_era)
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。