導讀:昆侖萬維全球首個集成視頻大模型與 3D 大模型的 AI 短劇平臺 SkyReels 正式發(fā)布。
從昆侖萬維獲悉,全球首個集成視頻大模型與 3D 大模型的 AI 短劇平臺 SkyReels 正式發(fā)布。
據官方介紹,SkyReels 平臺集劇本生成、角色定制、分鏡、劇情、對白 / BGM 及影片合成于一體,創(chuàng)作者能夠“一鍵成劇”,用戶輸入一個簡單創(chuàng)意,該工具即可完成從劇本到成品短劇制作的全流程。
官方分享了一段 AI 短劇 DEMO 如下:
一天,敏感內向的男孩小杰獨自走在街頭,卻意外偶遇了一只不屬于地球的靈動小生物 —— 它那一身亮橙色皮毛在陽光下閃閃發(fā)亮。小生物跟小杰在相處中成了朋友,他們在草坪上打盹、在水池中嬉戲??尚〗懿恢赖氖?,這只毛茸茸的小生物,竟是實驗室里逃走的 424 試驗品 ——
該平臺集成了昆侖萬維自研劇本大模型SkyScript、自研分鏡大模型StoryboardGen、自研3D 生成大模型Sky3DGen、以及業(yè)界首個將 AI 3D 引擎與視頻大模型深度融合的創(chuàng)新平臺 WorldEngine。
具體來看,SkyReels 可通過 AI 一鍵生成完整劇本、分鏡、人物對白與 BGM,支持角色形象、音色與分鏡的自定義調整,并能夠自動將內容轉換為 1080P 60 幀的高清視頻,單次可生成視頻長度達 180 秒。
昆侖萬維號稱構建了億級的高質量短劇結構化數(shù)據集SkyScript-100M,該數(shù)據集針對海量精彩短劇的劇情節(jié)奏、爽點、情緒變化進行了高質量標注。