設置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色
苹果 iOS 19 设计图泄露    宇树科技回应已盈利至少 5 年:属实

中國團隊推出腦電圖圖像生成模型 DreamDiffusion,清華、騰訊參與研究

2023/7/5 16:21:11 來源:IT之家 作者:江程(實習) 責編:汪淼

IT之家 7 月 5 日消息,清華大學深圳國際研究生院、騰訊人工智能實驗室(AI Lab)和鵬城實驗室的研究人員近日發(fā)表論文稱,研究團隊開發(fā)了一個名為 DreamDiffusion 的圖像生成模型,該模型可以直接通過腦電圖(EEG)信號生成高質(zhì)量圖像。相關論文發(fā)表于美國康奈爾大學旗下在線學術論文平臺 arXiv 上。

圖形用戶界面, 應用程序

▲ 圖源 研究團隊論文(下同)

目前已有不少團隊研究了使用文本到圖像的擴散模型從人腦生成圖像的方法,但大多數(shù)采用的都是功能性磁共振成像(fMRI)技術捕捉大腦活動從而生成圖像。這種技術缺乏實用性,因為它需要專家操作并且需要昂貴且難以攜帶的 fMRI 設備。

圖示

相比之下,腦電圖是一種記錄大腦電波活動的非侵入性、低成本方法,且已有一些便攜式商業(yè)產(chǎn)品可以輕松采集腦電圖信號。于是,研究團隊提出了一種“穩(wěn)定擴散”的圖像生成方法,能夠減少腦電圖信號的噪聲干預,使擴散模型的預訓練更穩(wěn)定有效。

研究團隊向 6 位受試者展示了屬于 40 個不同對象類別的 2000 張圖像,進而通過采集受試者的腦電圖信號來生成高質(zhì)量圖像。下圖中每組左邊標有 GT 的是原始圖像,右邊的 Sample 圖像為腦電圖生成圖像。

為了評估該方法的準確性,研究團隊將其與最近的另一項類似研究 Brain2Image 進行了定性比較,結(jié)果證實,其準確率明顯高于 Brain2Image 生成的圖像,從而證明了該方法的有效性。

IT之家附上論文地址點此前往

廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

  • 日榜
  • 周榜
  • 月榜

軟媒旗下網(wǎng)站: IT之家 最會買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機APP應用 魔方 最會買 要知