亚洲精品一区二区国产精华液,亚洲欧美中文日韩v在线观看,亚洲综合人成网免费视频,亚洲精品色婷婷在线影院,一区二区三区在线 | 网站

潞晨Open-Sora團隊在720p高清文生視頻質(zhì)量和生成時長上實現(xiàn)了突破性進展，支持無縫產(chǎn)出任意風格的高質(zhì)量短片，并且，該版本繼續(xù)全部開源，為開源社區(qū)帶來億點點震撼。

開源地址：https://github.com/hpcaitech/Open-Sora

從我們的官方Github下載的模型權(quán)重，能夠生成各種酷炫的短片，比如海浪和海螺的親密接觸，還有那些深不可測的森林秘境。

人物肖像的渲染也相當逼真。

還能精準渲染賽博朋克風，讓短片瞬間充滿強烈的未來感和科技感。

注：GIF 圖已被壓縮

也能生成有趣生動的動畫鏡頭，帶來極具表現(xiàn)力的視覺體驗。

即使是電影級別的鏡頭制作，也能輕松應對。

例如，實現(xiàn)流暢的變焦效果，為影片增添專業(yè)級的視覺效果。

注：GIF 圖已被壓縮

還能幫助電影制作人員創(chuàng)造出逼真的電影鏡頭。

注：GIF 圖已被壓縮

潞晨的 Open-Sora 模型以其卓越的性能揭示了視頻生成領域的廣闊前景，我們已經(jīng)將模型權(quán)重和訓練代碼全面開源，感興趣的朋友可以訪問我們的 GitHub閱讀技術(shù)報告，了解更多信息。網(wǎng)址：https://github.com/hpcaitech/Open-Sora

文生視頻界的開源戰(zhàn)士

LambdaLabs，美國科技界獨角獸，基于潞晨團隊先前開源的 Open-Sora 模型權(quán)重打造了一個數(shù)字樂高宇宙，樂高迷們在這里找到了極致的創(chuàng)意體驗。

潞晨深諳開源對于文生視頻技術(shù)突破的助力，因此，我們不僅持續(xù)開源模型權(quán)重，還在 Github 上曬出了技術(shù)路線，讓每個玩家都能成為文生視頻大模型的掌控者，不再是單純的圍觀群眾。

我們還撰寫了技術(shù)報告，方便更多AI愛好者共同學習進步。報告地址：https://github.com/hpcaitech/Open-Sora/blob/main/docs/report_03.md

技術(shù)深度解碼

我們在技術(shù)報告中，深度剖析了本次模型訓練的核心和關鍵。在上一個版本基礎上，引入了視頻壓縮網(wǎng)絡(Video Compression Network)、更優(yōu)的擴散模型算法、更多的可控性，并利用更多的數(shù)據(jù)訓練出了 1.1B 的擴散生成模型。

在這個"算力為王"的時代，我們深知視頻模型訓練的兩大痛點：計算資源的巨大消耗與模型輸出質(zhì)量的高標準。我們以一種極簡而有效的方案，成功地在成本和質(zhì)量之間找到了平衡點。

我們提出了一個創(chuàng)新的視頻壓縮網(wǎng)絡(VAE)，該網(wǎng)絡在空間和時間兩個維度上分別進行壓縮。具體來說，我們首先在空間維度上進行了 8x8 倍的壓縮，接著在時間維度上進一步壓縮了 4 倍。通過這種創(chuàng)新的壓縮策略，既避免了因抽幀而犧牲視頻流暢度的弊端，又大幅降低了訓練成本，實現(xiàn)了成本與質(zhì)量的雙重優(yōu)化。

視頻壓縮網(wǎng)絡結(jié)構(gòu)

Stable Diffusion 3.最新的擴散模型，通過采用了 rectified flow 技術(shù)替代 DDPM，顯著提升了圖片和視頻生成的質(zhì)量。盡管 SD3 的 rectified flow 訓練代碼尚未公開，但潞晨 Open-Sora 團隊已經(jīng)基于 SD3 的研究成果，提供了一套完整的訓練解決方案，包括：

簡單易用的整流(rectified flow)訓練

用于訓練加速的 Logit-norm 時間步長采樣

基于分辨率和視頻長度的時間步長采樣

通過這些技術(shù)的整合，我們不僅能夠加快模型的訓練速度，還能顯著減少推理階段的等待時間，確保用戶體驗的流暢性。此外，這套訓練方案還支持在推理過程中輸出多種視頻寬高比，滿足了多樣化場景下的視頻素材需求，為視頻內(nèi)容創(chuàng)作者提供了更加豐富的創(chuàng)作工具。

我們還在報告中透露了更多關于模型訓練的核心細節(jié)，包括數(shù)據(jù)清洗和模型調(diào)優(yōu)的實用技巧，以及構(gòu)建了更完善的模型評估體系，保障模型的穩(wěn)健性和泛化能力。

除此之外，我們還提供了可以自行一鍵部署的 Gradio 應用，并支持調(diào)節(jié)輸出的運動分數(shù)、美學分數(shù)和鏡頭移動方式等參數(shù)，甚至可以一鍵通過 GPT-4o 自動修改指令并支持中文輸入。

要忍不住 get hands dirty 了，詳情請戳：https://github.com/hpcaitech/Open-Sora/blob/main/docs/report_03.md

打破閉環(huán)，開源賦能

自 OpenAI Sora 發(fā)布以來，業(yè)界對 Sora 的開放性期待值爆表，但現(xiàn)實卻是持續(xù)的等待游戲。潞晨 Open-Sora 的開源，為文生視頻的創(chuàng)新和發(fā)展注入了強勁的活力。

“授人以魚不如授人以漁”，現(xiàn)在訪問我們的 GitHub 地址，即可零門檻免費獲得模型權(quán)重和全套訓練代碼。

這一轉(zhuǎn)型為企業(yè)用戶解鎖了自主開發(fā)文生視頻應用的新技能，無論是打造沉浸式游戲、創(chuàng)意廣告還是制作影視大片，文生視頻技術(shù)的應用場景得到了指數(shù)級擴展。

我們期待這股星星之火，能夠點燃整個文生視頻領域的創(chuàng)新激情，實現(xiàn)從點到面的燎原之勢。

最后附上潞晨 Open-Sora 開源鏈接：https://github.com/hpcaitech/Open-Sora