昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels,，短劇進入“無人區(qū)”(4)

小大

用微信掃描二維碼
分享至好友和朋友圈

關(guān)鍵詞：

2024-08-19 13:36:29 人民號

SkyScript

，替代了傳統(tǒng)短劇人工式的內(nèi)容研發(fā),。昆侖萬維首先構(gòu)建了億級的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M,，該數(shù)據(jù)集針對海量精彩短劇的劇情節(jié)奏,、爽點、情緒變化進行了高質(zhì)量標(biāo)注,；此外,，算法團隊設(shè)計了漸進式生成的劇本生成框架，實現(xiàn)了模型能夠輸出高度結(jié)構(gòu)化的精彩劇本,，不論是新手還是資深編劇,，都可以通過這套模型創(chuàng)作出吸引人的短劇劇本。(SkyScript劇本大模型技術(shù)原理圖)擁有一個動人的故事之后,，下一步是將這些故事轉(zhuǎn)化成分鏡頭劇本,，在傳統(tǒng)的生產(chǎn)模式中，這個環(huán)節(jié)需要邀請演員,、線下設(shè)置場景,，導(dǎo)演需要和演員溝通要領(lǐng)，再進行拍攝,，涉及到人力和布景成本,。但這些都可以通過AI大模型替代，SkyReels在這個環(huán)節(jié)使用的是昆侖萬維

自研分鏡大模型StoryboardGen,，

該模型對影視動畫數(shù)據(jù)進行逆向處理,，從而得到高質(zhì)量的工業(yè)級分鏡數(shù)據(jù)集，并且設(shè)計了分鏡多智能體框架,，高質(zhì)量實現(xiàn)場景,、鏡頭、角色和動作的生成,。在圖像生成效果上,，昆侖萬維使用自研首創(chuàng)的DiT-Moe模型，提升圖像質(zhì)量,。就如在正式拍攝的過程中一樣,，需要將分鏡頭有機融合在一起，才能得到一個完整的故事體系,。

SkyReels使用WorldEngine,，它是業(yè)界首個將AI 3D引擎與視頻大模型深度融合的創(chuàng)新平臺，實現(xiàn)了3D 生成,、視頻生成,、3D與視頻混合創(chuàng)作

。WorldEngine創(chuàng)新平臺包含多個子環(huán)節(jié)，每個環(huán)節(jié)又分別使用了不同的模型,。

在3D生成模塊中,，

使用的是自研的Sky3DGen大模型，它能夠生成多樣化的3D元素和場景,，從自然景觀到未來都市,，從靜態(tài)物體到動態(tài)角色，并且提供了實時的3D場景交互能力,，使得用戶可以即時看到調(diào)整和編輯的效果,，加快創(chuàng)作流程。在WorldEngine的加持下,，用戶可以構(gòu)建3D虛擬影棚,，實現(xiàn)虛擬拍攝體驗。

首頁上一頁 1 2 345 6 全文共 6 頁下一頁

關(guān)閉

昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels,，短劇進入“無人區(qū)”(4)

相關(guān)新聞

今日熱點

頻道熱點