OpenAI最近發(fā)布了一款名為Sora的新型文生視頻大模型，這個(gè)模型能夠根據(jù)文本指令生成長(zhǎng)達(dá)60秒的高清視頻。Sora不僅能夠創(chuàng)造逼真和充滿想象力的場(chǎng)景，而且還能夠在視頻中包含多個(gè)角色、展現(xiàn)特定的動(dòng)作類型，以及對(duì)對(duì)象和背景的精確細(xì)節(jié)描繪。例如，在一段演示視頻中，Sora展示了從天空俯瞰的東京街道，跟隨一對(duì)牽手的情侶走過日本風(fēng)格的街道。

Sora的工作原理基于擴(kuò)散模型，這種模型從類似于靜態(tài)噪聲的視頻開始，通過多個(gè)步驟逐漸去除噪聲，視頻也從最初的隨機(jī)像素轉(zhuǎn)化為清晰的圖像場(chǎng)景。此外，Sora還使用了Transformer架構(gòu)，具有極強(qiáng)的擴(kuò)展性。在訓(xùn)練方面，OpenAI利用了DALL·E 3的重述提示詞技術(shù)，為視覺模型訓(xùn)練數(shù)據(jù)生成高描述性的標(biāo)注，從而使模型能更好地遵循文本指令。
盡管Sora的能力令人印象深刻，但它也存在一些弱點(diǎn)。例如，Sora可能難以準(zhǔn)確模擬復(fù)雜場(chǎng)景的物理原理，并且可能無法理解因果關(guān)系。例如，在某個(gè)視頻中，一個(gè)人咬了一口餅干后，餅干卻沒有留下咬痕。
目前，Sora還未向公眾開放使用，OpenAI擔(dān)心深度偽造視頻的濫用問題?，F(xiàn)在只有一部分視覺藝術(shù)家、設(shè)計(jì)師和電影制作人有內(nèi)部試用機(jī)會(huì)。此外，OpenAI還在與第三方安全測(cè)試人員共享該模型，進(jìn)行紅隊(duì)測(cè)試，以確保其安全性和可靠性。
總的來說，Sora的出現(xiàn)代表了AI視頻生成領(lǐng)域的一大突破，它不僅能夠生成長(zhǎng)達(dá)60秒的視頻，還能在視頻中展現(xiàn)豐富的細(xì)節(jié)和情感，從而為內(nèi)容創(chuàng)作和媒體制作帶來新的可能性。

未經(jīng)允許不得轉(zhuǎn)載：445IT之家 » OpenAI震撼發(fā)布Sora 60秒高清視頻 一觸即發(fā)