精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

新火種AI|圍攻光明頂:Sora效應下的AI視頻生成競賽

新火種 ? 來源:新火種 ? 2024-03-16 11:12 ? 次閱讀

作者:一號

編輯:美美

Sora的出現,讓AI視頻生成領域真正“活”了起來。

2024年2月,OpenAI發布Sora,在生成式AI領域扔下了重磅炸彈。

盡管在去年,Runway、Pika以及Stable Video等就已經涉足AI視頻生成領域,并且也曾經帶給人們很多驚艷的時刻,甚至讓馬斯克都直呼,2024會是AI視頻生成的元年。就在大家還在期待著這些公司會在2024年帶給大家更多驚喜的時候,Sora放出的Demo,60秒、動作流暢,涂抹感不強,憑借一己之力抬高了視頻生成領域的標準,對于之前只能生成幾秒鐘的AI視頻來說,簡直就是降維打擊。

因此,不僅在社交媒體上人們對Sora贊不絕口,在官方媒體以及一眾企業家眼中,Sora也成了AI界中明星般的存在。盡管已經過去了一個月,光是靠著在TikTok上更新Sora生成的視頻,OpenAI剛開通不久的賬號就已經漲了數十萬粉。這樣的熱度,讓不少的公司都開始想著如何與Sora競爭,如何復現Sora。

AI視頻生成的戰場,因為Sora,開始真正熱了起來。

Sora橫空出世,同行們怎么樣了?

在Sora橫空出世后,因為AI繪畫開源模型Stable Diffusion而被人們所熟知的Stability AI率先帶頭沖鋒,將在去年展現過的Stable Video拿出來進行了公測。在SV官網上,提供了圖像和文字生成兩個選擇,在輸入提示詞之后,可以生成四張圖像供人選擇,并且還能選擇鏡頭運動的方式,但目前還只能生成4秒鐘的視頻,不少人實際體驗下來,覺得差強人意。

而要說去年炙手可熱的兩大AI視頻生成工具,那一定是Runway的Gen 2以及初創公司Pika。在Sora發布之前,Runway和Pika都被認為是視頻生成領域上的佼佼者,而在Sora展示了Demo之后,很多人認為,效果已經能夠輕松吊打這兩家新興獨角獸公司了,不少人開始擔憂這些創業者的命運。

不過,Pika創始人,華人女學霸郭文景卻并不心灰意冷,她在采訪中回應稱,“我們覺得這是一個很振奮人心的消息,我們已經在籌備直接沖,將直接對標Sora?!倍聦嵣?,Pika也開始在最近幾周開始了頻繁的更新,但并不是和Sora硬剛。Pika先是更新了讓視頻中的人物能夠根據輸入的音頻實現對口型的Lip Syne功能,主打一個電影臺詞還是電影最重要的部分。隨后又更新了視頻音效生成的功能,畢竟有聲電影比無聲電影還是要精彩得多的。

而Runway則是自去年Pika刷屏之后,就說下一步的研究方向是世界模型,因此到現在為止,除了更新了一下用于控制視頻生成效果的運動筆刷,就沒有什么大的消息了。

此外,還有一家來自以色列的公司LTX Studio另辟蹊徑,上線了一個電影制作平臺,直接把視頻生成、編輯、剪輯還有旁白一條龍全都搞定了。

國內企業也在暗暗追趕Sora

除了國外AI視頻生成領域原本的佼佼者開始對Sora奮起直追外,飽受吐槽的國產AI實際上也并沒有讓人失望。

首先是國內大廠,與Pika一樣,阿里巴巴同樣選擇了音頻和視頻結合的賽道來進行“彎道超車”,推出了一個基于音頻生成視頻的模型EMO,只要上傳一張照片和一段音頻,就能讓照片里的人開口說話、唱歌,并且不限時長。像什么小李子版說唱,蒙娜麗莎開口說話以及奧黛麗赫本演講等等都不在話下。

Sora Demo視頻中的這個東京女郎,也成為了能說會道的女士。而且效果也比PIka強不少,也因此在社交媒體上刷了一波屏,該說不說,大廠不愧是大廠。

而字節跳動,則是早在Sora發布之前,就已經展現了一款名為Boximator的視頻生成模型。它能夠精準空時視頻中的物體,用戶無需編寫復雜的文本提示詞,直接在參考圖像中框選對象,然后添加一些方框和線條來定義目標的結束位置或跨幀的整個運動路徑,盡管目前產品還未落地,但也體現了在視頻生成上的一大創意。

除了大廠,在今年3月5日的超訊通信X七火山大會上,一家名為七火山的公司推出了一個融合了Diffusion和Transformer的AI視頻生成模型Etna,實現了15秒4K 60幀的超逼真視頻生成效果,并且同樣具備一定的時空理解能力,可以說是當前國內最接近Sora的模型之一了。

Sora成功激活了AI視頻市場

除了國內外不同企業的追趕,Sora的出現不僅給同是AI視頻生成領域的創業公司帶來了壓力,也同樣給他們帶來了希望。

早在Sora展現Demo之前,國內就有一家名為智子引擎的公司在快1年以前提出了基于Transformer的Video統一生成框架,他們拿著這篇論文十分費勁地為投資人、求知者講了大半年,卻屢屢碰壁。而如今因為Sora的火爆,他們也收到了不同投資人的電話,想要學習Sora、學習他們的論文成果。

同樣因為Sora而收到關注的,還有一家名為愛詩科技的公司。它們的目標是3-6個月趕超Sora。它由字節跳動前視覺技術負責人王長虎于2023年4月創辦,他們致力于打造全球頂尖的AI視頻生成模型及應用。如今它已經完成了億級A1輪融資,資金將主要用于底層視頻大模型的技術研發和團隊搭建等方面。

企業之外,高校也并未落隊。北大團隊發起了一項Sora復現計劃——Open Sora,希望集結開源社區的力量,盡可能完成對Sora的復現。這個初始團隊一共有13人:帶隊的是北大信息工程學院助理教授、博導袁粒和北大計算機學院教授、博導田永鴻等人。消息一經公布,就有北大校友兼AnimateDiff貢獻者等人進行了回應,究竟這個“國產版Sora”的新挑戰者能否成功實現復現,我們拭目以待。

顯然Sora的誕生已經成功激活了AI視頻生成領域,相信一部完全由AI生成的院線電影可能會比我們想象中更快到來。

審核編輯:湯梓紅
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 視頻
    +關注

    關注

    6

    文章

    1937

    瀏覽量

    72820
  • AI
    AI
    +關注

    關注

    87

    文章

    30239

    瀏覽量

    268474
  • Sora
    +關注

    關注

    0

    文章

    76

    瀏覽量

    190
收藏 人收藏

    評論

    相關推薦

    Sora還在PPT階段,“中國版Sora”已經開放使用了!

    電子發燒友網報道(文/梁浩斌)今年春節期間,OpenAI的AI文字生成視頻模型Sora驚艷全世界,極高的視頻生成效果、長達60秒的
    的頭像 發表于 06-17 09:07 ?3339次閱讀

    阿里云視頻生成技術創新!視頻生成使用了哪些AI技術和算法

    照片就能讓 EMO 合成演戲唱歌視頻。 ? 阿里云在視頻生成領域的創新 ? EMO(Emote Portrait Alive)是一個由阿里巴巴集團智能計算研究院開發的框架,一個音頻驅動的 AI 肖像
    的頭像 發表于 05-08 00:07 ?3327次閱讀

    智譜AI正研發對標Sora的國產文生視頻模型

    智譜AI,這家國內估值超過200億的AI大模型獨角獸企業,正全力投入研發一款與OpenAI的Sora相媲美的國產文生視頻模型。據公司內部人士透露,該模型預計最快將在今年內發布,將成為
    的頭像 發表于 05-07 09:22 ?502次閱讀

    Sora到底牛在哪 | AI爆發的大趨勢,普通人真正該學的是什么

    Sora炸裂了的地方,在于它能理解自然語言,知道那個畫面該是怎么樣的,它學習很多視頻內容(大力出奇跡,需要很多算力),而且一上來就是能制作60s的視頻,剛好是短視頻的需求,之前的
    的頭像 發表于 03-06 22:46 ?485次閱讀

    除了刷屏的Sora,國內外還有哪些AI視頻生成工具

    Sora的發布也讓AI生成視頻有了突破性進展。 ? 過去一年多,全球科技公司都在發布各種大模型,然而AI
    的頭像 發表于 02-26 08:42 ?4262次閱讀
    除了刷屏的<b class='flag-5'>Sora</b>,國內外還有哪些<b class='flag-5'>AI</b><b class='flag-5'>視頻生成</b>工具

    OpenAI文生視頻模型Sora要點分析

    近日,美國人工智能公司OpenAI發布了首個視頻生成模型Sora。不同于此前許多AI大模型文生圖或視頻時,會出現人物形象前后不一致等問題
    的頭像 發表于 02-22 16:37 ?1013次閱讀
    OpenAI文生<b class='flag-5'>視頻</b>模型<b class='flag-5'>Sora</b>要點分析

    OpenAI 在 AI 生成視頻領域扔出一枚“王炸”,視頻生成模型“Sora

    ABSTRACT摘要2月16日凌晨,也就是中國大年初七,OpenAI在AI生成視頻領域扔出一枚“王炸”,宣布推出全新的生成式人工智能模型“Sora
    的頭像 發表于 02-22 08:25 ?349次閱讀
    OpenAI 在 <b class='flag-5'>AI</b> <b class='flag-5'>生成</b><b class='flag-5'>視頻</b>領域扔出一枚“王炸”,<b class='flag-5'>視頻生成</b>模型“<b class='flag-5'>Sora</b>”

    openai發布首個視頻生成模型sora

    美國當地時間2024年2月15日 ,OpenAI正式發布文生視頻模型Sora ,并發布了48個文生視頻案例和技術報告 ,正式入局視頻生成領域 。So
    的頭像 發表于 02-21 16:45 ?1181次閱讀

    OpenAI發布Sora模型,瞬間生成高清大片

    近日,人工智能領域的領軍企業OpenAI發布了一款名為“Sora”的視頻生成AI模型,再次展示了其在AI技術領域的創新實力。Sora以其出色
    的頭像 發表于 02-20 13:33 ?762次閱讀

    探索OpenAI Sora視頻AI生成技術及其應用如何使用指南

    OpenAI的Sora現已擴展其能力范圍,進入視頻生成領域,標志著人工智能技術在多媒體內容創作上的一個重大突破。Sora視頻AI功能使得用
    的頭像 發表于 02-20 12:01 ?1403次閱讀

    OpenAI新年開出王炸,視頻生成模型Sora問世

    近日,OpenAI在AI生成視頻領域取得重大突破,發布了全新的生成式人工智能模型“Sora”。該模型在
    的頭像 發表于 02-20 11:46 ?744次閱讀

    AI視頻年大爆發!2023年AI視頻生成領域的現狀全盤點

    2023年,也是AI視頻元年。過去一年究竟有哪些爆款應用誕生,未來視頻生成領域面臨的難題還有哪些?
    的頭像 發表于 02-20 10:40 ?1146次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>視頻</b>年大爆發!2023年<b class='flag-5'>AI</b><b class='flag-5'>視頻生成</b>領域的現狀全盤點

    成都匯陽投資關于Sora 橫空出世,AI 產業鏈風云再起!

    Sora視頻生成和模擬能力實現重大突破】 2 月16 日,OpenAI 發布最新文生視頻大模型 Sora ,并在官網發布由其生成的 4
    的頭像 發表于 02-20 09:43 ?802次閱讀
    成都匯陽投資關于<b class='flag-5'>Sora</b> 橫空出世,<b class='flag-5'>AI</b> 產業鏈風云再起!

    OpenAI發布文生視頻模型Sora,引領AI視頻生成新紀元

    在人工智能(AI)領域掀起新一輪革命浪潮的,正是OpenAI最新推出的文生視頻大模型——Sora。這款被業界廣泛贊譽的模型,以其“逼真”和“富有想象力”的視頻生成能力,徹底顛覆了傳統
    的頭像 發表于 02-19 11:03 ?895次閱讀

    OpenAI發布首個視頻生成模型Sora

    OpenAI近日宣布推出其全新的文本到視頻生成模型——Sora。這一突破性的技術將視頻創作帶入了一個全新的紀元,為用戶提供了前所未有的創作可能性。
    的頭像 發表于 02-18 10:07 ?1011次閱讀