，清華大學(xué)深圳國(guó)際研究生院、騰訊人工智能實(shí)驗(yàn)室和鵬城實(shí)驗(yàn)室的研究人員近日發(fā)表論文稱(chēng)，研究團(tuán)隊(duì)開(kāi)發(fā)了一個(gè)名為 DreamDiffusion 的圖像生成模型，該模型可以直接通過(guò)腦電圖(EEG)信號(hào)生成高質(zhì)量圖像。相關(guān)論文發(fā)表于美國(guó)康奈爾大學(xué)旗下在線學(xué)術(shù)論文平臺(tái) arXiv 上。
圖源 研究團(tuán)隊(duì)論文
目前已有不少團(tuán)隊(duì)研究了使用文本到圖像的擴(kuò)散模型從人腦生成圖像的方法，但大多數(shù)采用的都是功能性磁共振成像技術(shù)捕捉大腦活動(dòng)從而生成圖像。這種技術(shù)缺乏實(shí)用性，因?yàn)樗枰獙?zhuān)家操作并且需要昂貴且難以攜帶的 fMRI 設(shè)備。
相比之下，腦電圖是一種記錄大腦電波活動(dòng)的非侵入性、低成本方法，且已有一些便攜式商業(yè)產(chǎn)品可以輕松采集腦電圖信號(hào)。于是，研究團(tuán)隊(duì)提出了一種“穩(wěn)定擴(kuò)散”的圖像生成方法，能夠減少腦電圖信號(hào)的噪聲干預(yù)，使擴(kuò)散模型的預(yù)訓(xùn)練更穩(wěn)定有效。
研究團(tuán)隊(duì)向 6 位受試者展示了屬于 40 個(gè)不同對(duì)象類(lèi)別的 2000 張圖像，進(jìn)而通過(guò)采集受試者的腦電圖信號(hào)來(lái)生成高質(zhì)量圖像。下圖中虛線左邊的圖像是原始圖像，虛線右邊的圖像為腦電圖生成圖像。
為了評(píng)估該方法的準(zhǔn)確性，研究團(tuán)隊(duì)將其與最近的另一項(xiàng)類(lèi)似研究 Brain2Image 進(jìn)行了定性比較，結(jié)果證實(shí)，其準(zhǔn)確率明顯高于 Brain2Image 生成的圖像，從而證明了該方法的有效性。
IT之家附上論文地址:點(diǎn)此前往
廣告聲明:本文含有的對(duì)外跳轉(zhuǎn)鏈接，用于傳遞更多信息，節(jié)省甄選時(shí)間，結(jié)果僅供參考。IT之家所有文章均包含本聲明。
鄭重聲明：此文內(nèi)容為本網(wǎng)站轉(zhuǎn)載企業(yè)宣傳資訊，目的在于傳播更多信息，與本站立場(chǎng)無(wú)關(guān)。僅供讀者參考，并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。
|
