誤會(huì)了誤會(huì)了，被傳為“Sora作者之一”的上交大校友謝賽寧，本人緊急辟謠。

他的聲明發(fā)在其朋友圈，以及“交大校友薈”賬號(hào)交大org上，主要說(shuō)了幾點(diǎn)：

Sora完全是OpenAI的工作，和謝賽寧本人一點(diǎn)關(guān)系沒有。

但他后面將在紐約大學(xué)開展相關(guān)研究

要開發(fā)Sora這樣的成果，人才第一， 數(shù)據(jù)第二，算力第三。

《黑鏡》等科幻作品里的部分故事可能很快成為現(xiàn)實(shí)，需要準(zhǔn)備好對(duì)應(yīng)的監(jiān)督體系。

傳播不實(shí)信息的原文章也在大家?guī)兔εe報(bào)后被平臺(tái)下架了。

這番誤會(huì)終于算是告一段落。

不過(guò)謝賽寧透露的信息中還有一些細(xì)節(jié)值得關(guān)注，相熟的Sora開發(fā)領(lǐng)隊(duì)Bill Peebles說(shuō)團(tuán)隊(duì)基本不睡覺高強(qiáng)度工作了近一年。

而Bill Peebles在2023年3月入職OpenAI，距今剛好不到一年。

也從側(cè)面否定了之前傳聞中的“Sora早就開發(fā)完成，只是一直沒發(fā)”。

至于為什么會(huì)有這個(gè)離譜的誤會(huì)，還要從謝賽寧與Peebles合作的一篇論文說(shuō)起。

為什么會(huì)有這個(gè)誤會(huì)？

Sora技術(shù)報(bào)告引用的一項(xiàng)研究成果DiT模型，正是謝賽寧與Peebles合著。

那時(shí)Peebles博士在讀期間到Meta實(shí)習(xí)，謝賽寧也還沒完全離開FAIR。

DiT首次將Transformer與擴(kuò)散模型結(jié)合到了一起，相關(guān)論文被ICCV 2023錄用為Oral論文。

雖然Sora模型具體架構(gòu)細(xì)節(jié)沒有公布，但謝賽寧此前從Sora技術(shù)報(bào)告中分析出出，很可能就是建立在DiT的基礎(chǔ)之上。

除此之外，Sora還參考借鑒了許多其他學(xué)術(shù)界成果。

如把訓(xùn)練數(shù)據(jù)編碼成Patch的方法，引用了谷歌DeepMind的Patch n’ Pack等。

博采眾長(zhǎng)，同時(shí)堅(jiān)定在Scaling Law指引下力大磚飛，才造了令人驚嘆的Sora成果。

大神確實(shí)也是大神

排除掉這個(gè)誤會(huì)，謝賽寧確實(shí)也是AI研究領(lǐng)域的一位大神，目前在紐約大學(xué)任助理教授。

他本科畢業(yè)于上海交通大學(xué)ACM班，18年博士畢業(yè)于加州大學(xué)圣迭戈分校。

畢業(yè)后謝賽寧加入Facebook AI Research（FAIR），曾與何愷明合作提出ResNeXt。

目前他在谷歌學(xué)術(shù)總被引用數(shù)達(dá)到4萬(wàn)5，h-index也高達(dá)31。

就在Sora發(fā)布不久前，他還領(lǐng)導(dǎo)紐約大學(xué)團(tuán)隊(duì)對(duì)DiT模型來(lái)了個(gè)大升級(jí)，新模型稱為SiT。

SiT與DiT擁有相同的骨干網(wǎng)絡(luò)，但質(zhì)量、速度靈活性都更好。

謝賽寧認(rèn)為，跟進(jìn)Sora相關(guān)研究是學(xué)術(shù)界可以為這個(gè)時(shí)代肩負(fù)的重責(zé)之一。

讓我們一起期待他的新成果吧。

參考鏈接：[1]https://mp.weixin.qq.com/s/4ox9ITnd8TE2_Sior3eaEA