文生視頻大模型引發廣泛關注
深度關注 | Sora將改變什么

發布時間:2024-03-03 08:53:14   來源:中央紀委國家監委網站

中央紀委國家監委網站  李云舒

近日,比利時布魯塞爾,Sora模型根據文本內容生成的視頻正在智能手機上展示。圖片來源:視覺中國

只要輸入一段文字,就能輕松生成視頻,畫面清晰豐富,栩栩如生。近日,美國人工智能研究公司OpenAI發布的文生視頻模型Sora在全球引發關注。

一些業內人士指出,Sora將引領新一輪行業變革,與此同時,這一技術帶來的“虛實難辨”的風險,也引發人們的警惕與擔憂。Sora究竟基于怎樣的技術原理,將給我們的生活帶來怎樣的影響?記者采訪了有關專家。

僅需輸入文字指令就能生成60秒視頻,效果逼真自然

在人群中行進的春節舞龍隊伍、踏過白雪覆蓋的草地的猛犸象、動物運動員參加海上自行車比賽……在各大社交媒體上,Sora的演示視頻獲得大量轉發。

根據OpenAI官方介紹,Sora能根據文字指令,創作長達60秒的視頻。視頻包含多角度鏡頭,不僅能夠生成具有連貫性的場景,還能夠模擬復雜的場景和角色表情,為視頻增添更多細節和想象力。

例如,根據文字“一位時尚女性走在充滿溫暖霓虹燈和動畫城市標牌的東京街道上,她穿著黑色皮夾克、紅色長裙和黑色靴子,拎著黑色錢包。她戴著太陽鏡,涂著紅色口紅。她走路自信又隨意。街道潮濕且反光,在彩色燈光的照射下形成鏡面效果。許多行人走來走去”的提示,Sora生成了一段60秒的視頻,畫面質感高級,人物肌膚紋理的細節逼真。有網友表示,如果不注明AI生成,自己完全分不出真假。美國特斯拉公司首席執行官埃隆·馬斯克也感嘆:“人類認賭服輸。”

不過,一些視頻也存在穿幫或不合常理之處。例如,文字提示為“一只穿著黑色連帽運動衫的電腦黑客拉布拉多獵犬坐在電腦前,當它快速打字時,屏幕的眩光照射在狗的臉上”的視頻中,“電腦黑客拉布拉多獵犬”在一個貼滿海報的房間內,駕輕就熟地運用鍵盤,但屏幕的眩光同時也照亮了顯示器的背面。而另一個被描述為“低至地面的攝像機密切跟蹤叢林中的螞蟻,深入地下進入它們的世界”的視頻里,超微距追蹤蟻群的效果堪比紀錄片,但出現的螞蟻都只有四條腿。

“在目前所看到的由Sora生成的視頻中,仍存在一些違背物理規律的不真實內容,比如懸浮在空中的椅子,行人突然消失等。”浙江大學人工智能研究所所長吳飛告訴記者,造成這些問題的原因,可能是Sora記住了訓練視頻數據中人工生成的這類情景不合理的視頻,或者Sora在對時空子塊單元進行組合時作出了概率統計意義上的“合成謬誤”。

雖然Sora仍有弱點,但從當前展示的效果來看,Sora顯著領先于其他文生視頻模型。有業內人士指出,Sora的誕生推動AI視頻生成“進入了一個全新的時代”。

“Sora使普通人都可以通過自然語言交互這一簡單明了的方式合成先前沒有的視頻,這已經使其成為改變影視創作、廣告、設計等領域游戲規則的利器。”吳飛表示。

在被Sora的效果深深震撼的同時,不少人開始擔憂,這種真假難辨的視頻可能會成為錯誤信息偽裝及傳播的手段。目前,OpenAI官方表示,Sora并未向公眾開放,訪問權限僅限于選定的視覺藝術家、設計師、電影制作人。同時,OpenAI內部仍在進行模型倫理側的對抗性測試,例如錯誤信息、仇恨內容、偏見內容等。

逼真視頻合成的背后或是對真實物理世界規則的觀察與重現

據OpenAI官網介紹,Sora模型基于Transformer架構,通過訓練,Sora學會了理解和處理文本提示,將用戶的描述轉化為視頻內容。

從ChatGPT到Sora,從文本到圖像再到視頻,人工智能大模型何以合成出有意義、有價值的內容?在吳飛看來,這一次次帶來震撼的技術背后,都遵循著同一個原理:對合成內容中的最小單元進行有意義的關聯組合。“比如,在保持連貫的上下文語境中,對若干個單詞進行有意義線性組合,從而連綴成一個會意句子;在保持合理的空間布局下,對眾多圖像小塊進行有意義結構組合,拼合為一幅精彩圖像;在保持一致的連續時空內,對一系列時空子塊進行有意義時空組合,從而拼接成一段動感視頻。”

吳飛告訴記者,只要給定足夠多的句子,Transformer架構就可學習句子中單詞與單詞之間的共生關聯關系。“比如,‘項莊舞劍,意在沛公’這樣的句子在若干篇文章中出現,那么Transformer就會認為‘項莊’‘舞劍’‘沛公’等單詞之間存在共生關系,于是就在它們之間建立關聯。”在對海量語料數據庫進行學習的基礎上,人工智能算法就可建立起一個巨大無比的單詞共生關聯網絡圖。此后,每當人們給定一個單詞,算法就可按照要求,從單詞共生關聯網絡圖中找到下一個與之關聯關系最密切的單詞,作為給定單詞的后續單詞,最終達到自然語言合成的目的。

人工智能程序一旦捕獲了單詞與單詞之間的共生關聯,就可利用這種關聯來合成句子。而如果將圖像切分為空間子塊,或者將視頻切分為時空子塊,人工智能模型去學習這些子塊在空間維度中的布局分布、在時間維度上的連續變化等信息,同時學習子塊之間運動、顏色、光照、遮擋等復雜視覺特征,就可能重建、合成新的視頻序列。

吳飛介紹,Sora先是將文本單詞和視覺子塊映射到同構低維隱性空間,在這一低維隱性空間中引入擴散模型,對視覺信息加噪和去噪反復迭代,猶如先破壞再重建般學習,千錘百煉地挖掘文本單詞、空間子塊和時空子塊之間的關聯關系。“這就好比魯班學藝,不斷將大橋拆散再拼裝,從這個反復過程中知曉它們的支座系統、橋墩、橋臺和墩臺之間的組合關系,從而練就重建大橋的能力。”吳飛說,正因如此,Sora合成視頻的過程并非是簡單隨機的“鸚鵡學舌”,而是對物理世界“昨日重現”般的重建。

在一些業內人士看來,Sora最大的突破在于其似乎能夠“理解和模擬運動中的物理世界”。360集團創始人周鴻祎在社交媒體上表示,此前的文生圖、文生視頻都是在2D平面上對圖形元素進行操作,并沒有適用物理定律。但Sora生成的視頻能像人一樣理解日常生活中的物理規律,例如理解坦克具有巨大沖擊力,能撞毀汽車,而汽車無法撞毀坦克。

“Sora之所以能對物理世界規律進行模擬,一個可能的原因在于大數據驅動下,人工智能模型體現出一種學習能力,構建了非常復雜的非線性映射函數,超越了費曼極限,即Sora通過觀察和學習海量視頻數據后,洞察了視頻中時空子塊單元之間所應保持的物理規律。”吳飛說。

Sora誕生帶來更多可能性,AI發展的步伐進一步加快

一些專家指出,大模型驅動的生成式AI具有極為廣闊的應用前景,有望為眾多行業帶來強大的賦能效應。

工信部信息通信經濟專家委員會委員劉興亮此前在接受媒體采訪時表示,Sora的誕生標志著AI技術在內容創作領域的一個新紀元。在中央財經大學數字經濟融合創新發展中心主任陳端看來,長期來看,Sora將遠遠不只是內容生產工具,其構建的基于三維物理世界來創造數字原生世界的強大引擎,將給一些產業從底層工具層面帶來變化,形成深遠影響。

“Sora只是小試牛刀,它展現的不僅僅是一個視頻制作的能力,而是大模型對真實世界有了理解和模擬之后,會帶來新的成果和突破。”周鴻祎認為,有大模型技術作為基礎,加上人類知識的引導,可以創造各個領域的超級工具,“一旦人工智能接上攝像頭,把所有的電影都看一遍,把YouTube上和TikTok的視頻都看一遍,對世界的理解將遠遠超過文字學習,一幅圖勝過千言萬語,而視頻傳遞的信息量又遠遠超過一幅圖,這就離通用人工智能(AGI)真的不遠了。”

通常而言,AGI是指擁有與人類相當甚至超過人類智能的人工智能類型,不僅具有像人類一樣進行感知、理解、學習和推理等基礎思維能力,還能在不同領域靈活應用、快速學習和創造性思考。

不過,也有一些專家對此提出異議。圖靈獎得主楊立昆認為Sora并不理解物理規律,只是基于規模訓練去擴展了圖像。他在社交平臺上發文表示:澄清一個誤解,從提示中生成大部分看起來逼真的視頻并不表明系統理解物理世界,生成與世界模型的因果預測有很大不同。在楊立昆看來,通過生成像素來構建世界模型的方法,注定會失敗。

“實際上,我們現在還無法清楚定義AGI。人類對自己如何產生意識、形成各種能力都無法理解,目前奢望像人一樣的人工智能仍然只是幻想。”吳飛說。

浙江大學博士生導師趙俊博在社交媒體上發文表示:“反對很多自媒體把這個技術類比在AGI上面,我們距離AGI還差得遠……我覺得一個世界模型需要有能力去輸出動作,輸出對未來的預測,輸出對當前所處狀態的判斷。Sora大概率是學到了一些世界運轉的模式,但是否具備其他上述能力我們不知道。”

中國企業在人工智能一些細分領域已具備國際競爭力,但仍有短板

AI寫詩、AI畫圖、AI音樂……近年來,一系列利用人工智能技術生成內容的涌現,讓不少人感嘆“未來已來”。事實上,不僅在藝術創作領域,AI技術還在許多行業得到應用。

當地時間2月29日,一年一度的世界移動通信大會(MWC)在巴塞羅那落下帷幕。本屆MWC上,科大訊飛展出了其自研的星火認知大模型,會話智能等AI解決方案。據介紹,該認知大模型擁有跨領域的知識和語言理解能力,能夠基于自然對話方式理解與執行任務,并從海量數據和大規模知識中持續進化。近期發布的V3.5版本的語言理解、數學能力已超過GPT-4Turbo,將國產大模型推向新高度。

日前,清華大學官網發布的一則新聞稱,清華大學與北京宣武醫院團隊成功進行首例無線微創腦機接口臨床試驗。手術后,一位四肢癱瘓14年的患者在接受居家腦機接口康復訓練后,實現了自主喝水等腦控動作。

2月29日,國家自然科學基金委員會發布2023年度中國科學十大進展,其中,“人工智能大模型為精準天氣預報帶來新突破”位列第一。“人工智能大模型為精準天氣預報帶來新突破”是來自華為云計算技術有限公司的研究成果,該模型能夠預報7天內的地表層和13個高空層的溫度、氣壓、濕度、風速等氣象要素,僅需10秒即可完成全球7天重要氣象要素的預報,計算速度較數值方法提升1萬倍以上。

當前,我國在人工智能技術和大模型領域已經取得了顯著的進展,但與國際領先水平相比,仍存在一些短板。在商務部研究院電子商務研究所副研究員洪勇看來,國際上的部分大型科技公司憑借雄厚的技術積累和資源在人工智能賽道占據領先地位。“中國企業在一些細分領域已具備國際競爭力,但仍有短板。當下需要加強基礎科研、培養高層次人才、建立合規體系,并積極參與國際合作與競爭,進一步提升在全球人工智能領域的地位。”

AI熱潮在創造許多新機遇的同時,也不可避免地帶來前所未有的挑戰。在今年1月的美國民主黨初選投票前,部分選民接到“美國總統拜登”來電,隨后初步調查顯示,這些來電中的聲音是由人工智能生成的。

周鴻祎指出,文生視頻的“深度偽造”技術可能引發欺詐問題。“例如利用Sora偽造一個以假亂真的視頻發給你家里人,說你出事了,說你受傷了,現在住在醫院里,趕緊給你微信打款,給你轉賬,這就非常危險。”

為規范生成式人工智能的應用,中國已發布《互聯網信息服務深度合成管理規定》《生成式人工智能服務管理暫行辦法》等,對人工智能相關技術規范、義務主體與責任作出規定,強調技術開發、服務提供者的主體責任。全國兩會將至,多名代表委員也針對生成式人工智能技術帶來的挑戰等問題提出建議和提案。

“人工智能是未來的重要發展方向,在構建有效監管體系的同時,也要避免‘一管就死’。”全國政協委員、金杜律師事務所高級合伙人張毅建議,應該盡快推進人工智能法的出臺,構建人工智能算法治理體系,彌補監管體系空白,同時引入“監管沙盒”制度,允許算法及人工智能企業在監管機構的監督下,在相對可控的環境內進行試驗性開發、測試和驗證。

亚洲美女91,久久久久久91,激情久久久久久久久久久久久久久久,99久久婷婷国产综合精品首页
韩国女同性做爰三级| 在线观看一区二区三区四区| 亚洲最大视频网| 色婷婷狠狠18禁久久| 日本少妇xxxx软件| 一个人看的视频www| 18禁一区二区三区| 一起草在线视频| 欧美性xxxx图片| 日韩精品电影一区二区三区| 天天做夜夜爱爱爱| 中文字幕99页| 中文字幕在线1| 国产传媒免费在线观看| 91精品人妻一区二区三区蜜桃2| 少妇搡bbbb搡bbb搡打电话| 一起草在线视频| 手机看片国产日韩| 69亚洲乱人伦| 中国特黄一级片| 无码人妻精品一区二区三区99不卡| 国产网站无遮挡| 欧美激情精品久久久久久免费| 日本天堂中文字幕| 扒开jk护士狂揉免费| 国产激情无码一区二区三区| av黄色一级片| 99精品久久久久| 久久国产柳州莫菁门| 538精品视频| 永久久久久久久| 少妇久久久久久久久久| 中文在线字幕观看| 欧美乱大交做爰xxxⅹ小说| 国产精品九九视频| 女王人厕视频2ⅴk| 五月综合色婷婷| 高清国产在线观看| 熟女俱乐部一区二区视频在线| 亚洲欧美一区二区三区四区五区| 91视频在线网站| 97香蕉碰碰人妻国产欧美| 69av视频在线| 国产一区二区精彩视频| 色www亚洲国产阿娇yao| 性少妇bbw张开| 少妇光屁股影院| 中文文字幕文字幕高清| 在线中文字日产幕| 年下总裁被打光屁股sp| 亚洲熟女www一区二区三区| 亚洲AV成人无码精电影在线| 午夜精产品一区二区在线观看的| 国产成人无码一区二区在线观看| 日本wwwwwww| 婷婷五月精品中文字幕| 超碰caoprom| 五级黄高潮片90分钟视频| av鲁丝一区鲁丝二区鲁丝三区| 成熟妇人a片免费看网站| 国产精品熟妇一区二区三区四区 | 日本少妇xxx| 人妻少妇偷人精品久久久任期| 成人免费播放视频| www.黄色网| 国产熟妇久久777777| 中文字幕免费视频| 精品少妇一区二区三区密爱| 久久高清内射无套| 香蕉视频污视频| 懂色av蜜桃av| 99热这里只有精品2| 色哟哟视频在线| 一区二区黄色片| 欧美大片xxxx| a级在线观看视频| 人与动物性xxxx| 在线精品视频播放| 久久久免费看片| 中文字幕乱视频| 日本激情视频一区二区三区| 四虎国产精品永久免费观看视频| 国产黄色三级网站| 中文字幕美女视频| 国产美女精品久久| 18禁一区二区三区| 91导航在线观看| 91黄色免费视频| 波多野结衣电影免费观看| 性猛交ⅹxxx富婆video | xxxx日本少妇| 亚洲精品无码一区二区| 性少妇xx生活| 加勒比一区二区| 无码人妻丰满熟妇啪啪网站| 欧美黄色一级生活片| 免费黄色三级网站| 91视频免费在线看| 五月天色婷婷丁香| 摸摸摸bbb毛毛毛片| 99久久人妻精品免费二区| 欧美偷拍第一页| 国产天堂av在线| 国产一二三四区在线| 久久久久久九九九九九| 精品视频站长推荐| 久久久久亚洲av无码网站| 国产性xxxx| 午夜av入18在线| 亚洲天堂一级片| 国产乱国产乱老熟300| 69av视频在线| 亚洲精品一二三四| 亚洲性图第一页| 在线播放av网址| 特级特黄刘亦菲aaa级| 国产精品嫩草69影院| 亚洲一二三四五| 男人网站在线观看| 三级电影在线看| 受虐m奴xxx在线观看| 四虎国产精品成人免费入口| 久久久久久久毛片| 免费黄色国产视频| 国产黄色的视频| 精品人妻在线视频| 播金莲一级淫片aaaaaaa| 日韩在线免费观看av| jizzjizzjizz国产| www.欧美com| 大黑人交xxx极品hd| 国产精品视频在| 日本人妻一区二区三区| 大地资源二中文在线影视观看| 黄色aaa视频| 黄色片子在线观看| 国产精品成人99一区无码| 免费污网站在线观看| 午夜精品福利在线视频| 色哟哟无码精品一区二区三区| 成都免费高清电影| 精品无码一区二区三区蜜臀| 男男做爰猛烈叫床爽爽小说 | 第一次破处视频| 亚洲av无码久久精品色欲| www.超碰97| www.色小姐com| 中文字幕人妻一区二区| 婷婷色中文字幕| 色婷婷av777| 亚洲美女高潮久久久| 成人做爰69片免网站| 亚洲美女在线播放| 亚洲AV成人无码精电影在线| av在线播放网址| 69xx绿帽三人行| 999精品久久久| 四虎永久免费在线观看| 绯色av蜜臀vs少妇| 亚洲色图综合区| 国产精品麻豆免费版现看视频| 亚洲 欧美 日韩在线| 亚洲av无码一区东京热久久| 亚洲第一视频区| 亚洲精品国产一区黑色丝袜| 国产51自产区| 最新国产精品自拍| 免费国偷自产拍精品视频| 免费看的黄色录像| 天堂久久精品忘忧草| 青青草视频播放| 深田咏美中文字幕| 欧美xxxxx少妇| 成人欧美精品一区二区| 国产精品无码自拍| 一区二区三区人妻| 国产成人av片| 国产二级一片内射视频播放| 成人啪啪18免费游戏链接| 波多野吉衣在线视频| 极品白嫩少妇无套内谢| 欧美熟妇精品一区二区蜜桃视频| 老女人性生活视频| 无码人妻精品一区二区三| 国产xxxx视频| 久久精品视频18| 美女av免费看| 草视频在线观看| 日本一级大毛片a一| 亚洲AV无码国产精品| 亚洲a v网站| 日本 欧美 国产| 岛国大片在线免费观看| 丝袜熟女一区二区三区| www.自拍偷拍| 国产精品国产精品88| 亚洲精品乱码久久久久久久| 制服 丝袜 综合 日韩 欧美| 一级片一级片一级片| 伊人久久一区二区三区|