<acronym id="s8ci2"><small id="s8ci2"></small></acronym>
<rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
<acronym id="s8ci2"></acronym>
<acronym id="s8ci2"><center id="s8ci2"></center></acronym>
0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

復盤與分析:Sora是如何成功的?

架構師技術聯盟 ? 來源:架構師技術聯盟 ? 2024-02-25 16:44 ? 次閱讀

本文來自“技術復盤與分析:Sora是如何成功的?”,報告深入分析了Sora的各項能力、采用的技術路線和創新性的工作。我們認為Sora是將之前的研究工作上進行了很好的綜合,并在強大的算力、工程能力以及GPT和DALL·E模型技術積累下誕生的。

隨著OpenAI將這種具有開創性的技術路徑走通,國內模型和應用廠商有望快速迭代出類Sora的視頻生成模型和應用產品。

Sora的突破可以概括為以下幾點:

? 從生成效果看,突破此前視頻生成模型的時長限制,能夠生成60s時長、分辨率1080p的視頻,可用性極高。

? 從技術路線看,依舊遵從LLM范式“大力出奇跡”,通過patches向量化與transformer架構結合,使得訓練數據能夠使用大小、尺寸、分辨率不同的視頻,能夠讓模型學習到視頻的規律乃至世界的規律;使用GPT生成prompt,在訓練和推理過程中解決了模態之間的對齊問題,大大提升了生成效果。

? 從產業發展看,Sora通用性極強,有望統一視頻生成生態;能夠進一步賦能與促進下游應用發展,未來有望成為真正的“世界模擬器” 。

ac7bf4aa-d383-11ee-a297-92fbcf53809c.jpg

ac801396-d383-11ee-a297-92fbcf53809c.jpg

ac83b55a-d383-11ee-a297-92fbcf53809c.jpg

acab66ea-d383-11ee-a297-92fbcf53809c.jpg

acb72408-d383-11ee-a297-92fbcf53809c.jpg

acbb11ee-d383-11ee-a297-92fbcf53809c.jpg

acbeff84-d383-11ee-a297-92fbcf53809c.jpg

acd36ed8-d383-11ee-a297-92fbcf53809c.jpg

ace01d36-d383-11ee-a297-92fbcf53809c.jpg

aceb4788-d383-11ee-a297-92fbcf53809c.jpg

acefcf6a-d383-11ee-a297-92fbcf53809c.jpg

Sora的誕生無異是產業的里程碑,以其為代表的“多模型協同”方式是接近AGI的可行道路。與Gemini這樣的多模態模型不同,Sora的核心能力依舊在視頻生成領域,且在推理時需要調用GPT的能力重述prompt。這種方式可能不如Gemini符合直覺,但效果非常顯著,大大加速了產業走向AGI的過程。

Sora代表LLM的通用和涌現范式在視頻領域的成功復現,因此算力依舊是模型與應用廠商布局的關鍵。通過巧妙的patches嵌入方法,Sora能夠運用高效的Transformer架構在海量的視頻上進行訓練,因此也涌現了模擬現實世界的能力。在其他技術路徑的模型獲得更好的效果之前,這種“大力出奇跡”的訓練方式將依舊是產業的主流,算力需求將持續迎來更大的爆發。

Sora可能成為視頻生成領域的Base Model,模型層的競爭格局可能走向收斂。相比其他輕應用,Sora的生成時長更長、質量更高,能夠完全替代這些輕應用。因此在多數場景下,Sora都能取代其他的生成模型和應用,最終使視頻模型格局走向收斂。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 模型
    +關注

    關注

    1

    文章

    2790

    瀏覽量

    47925
  • GPT
    GPT
    +關注

    關注

    0

    文章

    326

    瀏覽量

    15033
  • Sora
    +關注

    關注

    0

    文章

    74

    瀏覽量

    146

原文標題:復盤與分析:Sora是如何成功的?

文章出處:【微信號:架構師技術聯盟,微信公眾號:架構師技術聯盟】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    連續時間LTI系統的頻域分析.ppt

    連續時間LTI系統的頻域分析.ppt用拉氏變換法分析電路的步驟一.微分方程的拉氏變換 二.基于 s 域模型的電路分析
    發表于 09-16 08:38

    關于的基礎知識介紹

    2018年9月行動
    發表于 07-24 09:48

    什么是SORA?跟傳統的無線通訊系統有什么不同?

    什么是SORA?跟傳統的無線通訊系統有什么區別?
    發表于 08-02 06:59

    零售數據分析|怎么知道哪些品類增長有望,哪些門店需關停?

    各位數據的朋友,大家好,我是老周道數據,和你一起,用常人思維+數據分析,通過數據講故事。每到年終之類的日子,各行各業的企業們都需要對過去一年的經營管理活動進行一個分析,累積經驗、尋
    發表于 03-28 14:36

    奧特曼發布王炸模型Sora OpenAI首個文生視頻模型Sora正式亮相

    奧特曼發布王炸模型Sora OpenAI首個文生視頻模型Sora正式亮相 2月16日凌晨OpenAI的首個文生視頻模型Sora正式亮相。Sora只需輸入文字,便可生成一段長達60秒的高
    的頭像 發表于 02-18 17:41 ?657次閱讀

    openai sora如何使用?Sora 使用指南:快速上手

    OpenAI Sora 使用指南:快速上手 歡迎使用OpenAI Sora,一款強大的人工智能視頻生成工具。無論您是視頻制作新手還是專業人士,本指南將幫助您快速掌握Sora,輕松創作出高質量的視頻
    的頭像 發表于 02-20 11:19 ?3433次閱讀

    Sora到底懂不懂物理世界? Sora開啟更多可能

    OpenAI的視頻生成模型Sora持續引發關注,而圍繞Sora到底懂不懂物理世界?這個討論越發火熱,甚至是在討論Sora 到底是不是物理引擎甚至世界模型? 當然Sora 目前看起來似乎
    的頭像 發表于 02-20 11:08 ?435次閱讀

    sora最新消息 sora是什么意思

    Sora,是美國人工智能研究公司OpenAI發布的人工智能文生視頻大模型(但OpenAI并未單純將其視為視頻模型,而是作為“世界模擬器”,于2024年2月15日(美國當地時間)正式對外發布
    的頭像 發表于 02-21 16:38 ?1400次閱讀

    sora系列是哪個公司的 sora視頻怎么用

    sora系列是哪個公司的 Sora,美國人工智能研究公司OpenAI發布的人工智能文生視頻大模型(但OpenAI并未單純將其視為視頻模型,而是作為“世界模擬器”,于2024年2月15日(美國當地時間
    的頭像 發表于 02-21 16:35 ?3525次閱讀

    sora如何使用 sora是什么軟件

    Sora是一種擴散模型,具備從噪聲中生成完整視頻的能力,它生成的視頻一開始看起來像靜態噪音,通過多個步驟逐漸去除噪聲后,視頻也從最初的隨機像素轉化為清晰的圖像場景,其能夠一次生成多幀預測,確保畫面
    的頭像 發表于 02-21 17:20 ?1652次閱讀

    Sora來了,會砸掉誰的飯碗?反觀第一撥靠Sora賺錢的人已經出現

    Sora來了,會砸掉誰的飯碗?第一撥靠Sora賺錢的人已經出現 人工智能的快速演進使得大家的緊迫感再次加大,特別是Sora來了,Sora文生視頻從目前的點點滴滴都顯示了它的強大,她會砸
    的頭像 發表于 02-22 14:11 ?827次閱讀

    sora模型怎么使用 sora模型對現實的影響

    美國當地時間2024年2月15日 ,OpenAI正式發布文生視頻模型Sora ,并發布了48個文生視頻案例和技術報告 ,正式入局視頻生成領域 。Sora能夠根據提示詞生成60s的連貫視頻,“碾壓
    的頭像 發表于 02-22 16:42 ?742次閱讀

    sora模型上市公司 sora模型對現實的影響

    sora模型的上市公司目前沒有相關官方的報道,因此無法給出準確的回答。 Sora能夠獲取現有視頻并對其進行擴展或填充缺失的幀,這一功能在視頻編輯、電影特效等領域具有應用前景,可以幫助用戶快速完成視頻
    的頭像 發表于 02-22 16:46 ?650次閱讀

    sora模型是什么意思 sora模型引發行業變革

    Sora在日語中是“天空”(そら)的意思,引申含義還有“自由”,象征著其無限的創造潛力。 Sora發布后,OpenAI的估值迅速上漲(有望超過800億美元,2023年ChatGPT發布不久
    的頭像 發表于 02-22 17:00 ?1305次閱讀

    Sora的最強競爭對手,來自中國

    今年2月發布的Sora,先是引得業界“哇聲一片”,馬斯克直接表態「人類愿賭服輸」;周鴻祎說借助Sora人類實現AGI將縮減至一兩年。大佬的彩虹屁不是白吹的。利用
    的頭像 發表于 05-13 17:11 ?93次閱讀
    <b class='flag-5'>Sora</b>的最強競爭對手,來自中國
    亚洲欧美日韩精品久久_久久精品AⅤ无码中文_日本中文字幕有码在线播放_亚洲视频高清不卡在线观看
    <acronym id="s8ci2"><small id="s8ci2"></small></acronym>
    <rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
    <acronym id="s8ci2"></acronym>
    <acronym id="s8ci2"><center id="s8ci2"></center></acronym>