技術(shù)
導(dǎo)讀:昆侖萬(wàn)維全球首個(gè)集成視頻大模型與 3D 大模型的 AI 短劇平臺(tái) SkyReels 正式發(fā)布。
從昆侖萬(wàn)維獲悉,全球首個(gè)集成視頻大模型與 3D 大模型的 AI 短劇平臺(tái) SkyReels 正式發(fā)布。
據(jù)官方介紹,SkyReels 平臺(tái)集劇本生成、角色定制、分鏡、劇情、對(duì)白 / BGM 及影片合成于一體,創(chuàng)作者能夠“一鍵成劇”,用戶輸入一個(gè)簡(jiǎn)單創(chuàng)意,該工具即可完成從劇本到成品短劇制作的全流程。
官方分享了一段 AI 短劇 DEMO 如下:
一天,敏感內(nèi)向的男孩小杰獨(dú)自走在街頭,卻意外偶遇了一只不屬于地球的靈動(dòng)小生物 —— 它那一身亮橙色皮毛在陽(yáng)光下閃閃發(fā)亮。小生物跟小杰在相處中成了朋友,他們?cè)诓萜荷洗蝽?、在水池中嬉戲??尚〗懿恢赖氖?,這只毛茸茸的小生物,竟是實(shí)驗(yàn)室里逃走的 424 試驗(yàn)品 ——
該平臺(tái)集成了昆侖萬(wàn)維自研劇本大模型SkyScript、自研分鏡大模型StoryboardGen、自研3D 生成大模型Sky3DGen、以及業(yè)界首個(gè)將 AI 3D 引擎與視頻大模型深度融合的創(chuàng)新平臺(tái) WorldEngine。
具體來(lái)看,SkyReels 可通過(guò) AI 一鍵生成完整劇本、分鏡、人物對(duì)白與 BGM,支持角色形象、音色與分鏡的自定義調(diào)整,并能夠自動(dòng)將內(nèi)容轉(zhuǎn)換為 1080P 60 幀的高清視頻,單次可生成視頻長(zhǎng)度達(dá) 180 秒。
昆侖萬(wàn)維號(hào)稱構(gòu)建了億級(jí)的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M,該數(shù)據(jù)集針對(duì)海量精彩短劇的劇情節(jié)奏、爽點(diǎn)、情緒變化進(jìn)行了高質(zhì)量標(biāo)注。