昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels,，短劇進入“無人區(qū)”(4)

小大

用微信掃描二維碼
分享至好友和朋友圈

關(guān)鍵詞：

2024-08-19 13:36:29 人民號

SkyScript

,，替代了傳統(tǒng)短劇人工式的內(nèi)容研發(fā)。昆侖萬維首先構(gòu)建了億級的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M,，該數(shù)據(jù)集針對海量精彩短劇的劇情節(jié)奏,、爽點,、情緒變化進行了高質(zhì)量標注；此外,，算法團隊設(shè)計了漸進式生成的劇本生成框架,，實現(xiàn)了模型能夠輸出高度結(jié)構(gòu)化的精彩劇本，不論是新手還是資深編劇,，都可以通過這套模型創(chuàng)作出吸引人的短劇劇本,。(SkyScript劇本大模型技術(shù)原理圖)擁有一個動人的故事之后，下一步是將這些故事轉(zhuǎn)化成分鏡頭劇本,，在傳統(tǒng)的生產(chǎn)模式中,，這個環(huán)節(jié)需要邀請演員、線下設(shè)置場景,，導演需要和演員溝通要領(lǐng),，再進行拍攝，涉及到人力和布景成本,。但這些都可以通過AI大模型替代,，SkyReels在這個環(huán)節(jié)使用的是昆侖萬維

自研分鏡大模型StoryboardGen，

該模型對影視動畫數(shù)據(jù)進行逆向處理,，從而得到高質(zhì)量的工業(yè)級分鏡數(shù)據(jù)集,，并且設(shè)計了分鏡多智能體框架，高質(zhì)量實現(xiàn)場景,、鏡頭,、角色和動作的生成。在圖像生成效果上,，昆侖萬維使用自研首創(chuàng)的DiT-Moe模型,，提升圖像質(zhì)量。就如在正式拍攝的過程中一樣,，需要將分鏡頭有機融合在一起,，才能得到一個完整的故事體系。

SkyReels使用WorldEngine,，它是業(yè)界首個將AI 3D引擎與視頻大模型深度融合的創(chuàng)新平臺,，實現(xiàn)了3D 生成、視頻生成,、3D與視頻混合創(chuàng)作

,。WorldEngine創(chuàng)新平臺包含多個子環(huán)節(jié),，每個環(huán)節(jié)又分別使用了不同的模型。

在3D生成模塊中,，

使用的是自研的Sky3DGen大模型,，它能夠生成多樣化的3D元素和場景，從自然景觀到未來都市,，從靜態(tài)物體到動態(tài)角色,，并且提供了實時的3D場景交互能力，使得用戶可以即時看到調(diào)整和編輯的效果,，加快創(chuàng)作流程,。在WorldEngine的加持下,，用戶可以構(gòu)建3D虛擬影棚,，實現(xiàn)虛擬拍攝體驗。

首頁上一頁 1 2 345 6 全文共 6 頁下一頁

關(guān)閉

昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels,，短劇進入“無人區(qū)”(4)

相關(guān)新聞

今日熱點

頻道熱點