WAIC | AI+IP, 階躍星辰攜手上海電影“大鬧”天宮

WAIC AI+IP 階躍星辰

數(shù)據(jù)猿 | 2024-07-04 20:01

【數(shù)據(jù)猿導(dǎo)讀】 7 月 4 日，隨著 2024 年世界人工智能大會（WAIC）在上海的盛大開幕，全球的目光再次聚焦于中國人工智能領(lǐng)域的最新發(fā)展。在這場匯聚了全球頂尖科技的盛會上，一個熟悉的身影在高科技的展臺中格外引人注目——他就是中國古典文學(xué)中的傳奇英雄，齊天大圣孫悟空。這個來自上海美術(shù)電影...

WAIC_AI+IP_階躍星辰-1

WAIC_AI+IP_階躍星辰-2

[展臺實(shí)景圖]

7 月 4 日，隨著 2024 年世界人工智能大會（WAIC）在上海的盛大開幕，全球的目光再次聚焦于中國人工智能領(lǐng)域的最新發(fā)展。在這場匯聚了全球頂尖科技的盛會上，一個熟悉的身影在高科技的展臺中格外引人注目——他就是中國古典文學(xué)中的傳奇英雄，齊天大圣孫悟空。這個來自上海美術(shù)電影制片廠出品的《大鬧天宮》經(jīng)典形象，以其獨(dú)特的魅力和影響力，為 2024 年世界人工智能大會增添了一抹別樣的色彩。

在展示現(xiàn)場，大家玩得最嗨的是階躍星辰聯(lián)合上海電影推出的《大鬧天宮》AI 互動體驗(yàn)——“測測你是哪路神仙”。游戲開始，系統(tǒng)會為玩家生成一張《大鬧天宮》畫風(fēng)的形象作為初始平民角色，玩家通過闖關(guān)答題就能實(shí)現(xiàn)一場個人化的天宮職場升職記，還會為玩家提供 MBTI 和職業(yè)特征分析。

AI+IP 帶動中國大 IP 產(chǎn)業(yè)發(fā)展

這款游戲是上海電影和階躍星辰在"AI+IP”領(lǐng)域的一次創(chuàng)新嘗試。上海電影集團(tuán)董事長王健兒表示：“很高興和階躍星辰開展合作。優(yōu)質(zhì) IP 是上影的核心、長期的資產(chǎn)，用 AI 的工具能夠來讓我們 IP 價值得到充分的釋放。”

上海電影自 2 月 29 日發(fā)布 iNEW 新戰(zhàn)略以來，致力于將先進(jìn)的 AI 技術(shù)融入至內(nèi)容生產(chǎn)的各個環(huán)節(jié)，希望以大模型激活上影海量的經(jīng)典中國 IP ，推動中國大 IP 產(chǎn)業(yè)的創(chuàng)新發(fā)展。階躍星辰是上海電影在”AI+“領(lǐng)域的重要合作伙伴，本次上海電影將《大鬧天宮》此具有國民性的頭部 IP 作為雙方”IP+AI“合作第一步，希望通過 AI 創(chuàng)新帶給觀眾經(jīng)典 IP 更大的想象和互動空間。

除了《大鬧天宮》，上影集團(tuán)坐擁《葫蘆兄弟》、《哪吒鬧?！贰ⅰ逗谪埦L》等眾多頂流動畫 IP，還有近幾年好評如潮的《繁花》、《中國奇譚》等現(xiàn)象級作品，這些極具中國特色的內(nèi)容構(gòu)成了上影集團(tuán)深厚的文化資產(chǎn)和品牌價值。近年來，上影數(shù)字化轉(zhuǎn)型持續(xù)加速，積極探索 AI 技術(shù)在 IP 內(nèi)容煥新及商業(yè)開發(fā)領(lǐng)域的應(yīng)用。

階躍星辰創(chuàng)始人、CEO 姜大昕博士表示：“我們十分珍視上影集團(tuán)的寶貴文化資產(chǎn)，希望通過 AI 延續(xù)經(jīng)典 IP 的獨(dú)特價值、弘揚(yáng)中國傳統(tǒng)動畫風(fēng)格。”

領(lǐng)先多模能力打開 AI 游戲想象空間

這款“天宮 MBTI”游戲的創(chuàng)想來自階躍星辰的一支產(chǎn)品團(tuán)隊(duì)。“游戲背后調(diào)用了多個階躍星辰自研的 Step 系列大模型，融合了圖像理解、風(fēng)格遷移、圖像生成、劇情創(chuàng)作等多種能力，豐富立體地展現(xiàn)了階躍星辰行業(yè)領(lǐng)先的多模態(tài)水平。例如，在初始角色生成時，系統(tǒng)首先會判斷用戶上傳的照片是否符合‘捏臉’要求，然后用非常《大鬧天宮》的語言風(fēng)格靈活給予反饋。這里就體現(xiàn)了模型的圖片理解能力和大語言模型的能力。” 游戲開發(fā)負(fù)責(zé)人介紹。“在大模型技術(shù)加持下，這款游戲就讓玩家獲得了和傳統(tǒng)線上 H5 游戲完全不同的互動體驗(yàn)。因?yàn)樗械幕訂栴}、用戶形象、分析結(jié)果都是模型實(shí)時學(xué)習(xí)特征后生成的，真正做到了千人千面和無限劇情的可能。”

在游戲中，除了《大鬧天宮》劇作里家喻戶曉的人物，玩家可以解鎖天宮更多神仙角色和場景，比如解夢仙、孟婆、司樂正、太上煉丹師、蟠桃仙官、地府判官、卷簾大將等等，而只有 1% 的玩家有機(jī)會解鎖齊天大圣、太上老君、玉皇大帝等稀缺角色。游戲也結(jié)合了當(dāng)下最火的 MBTI 人格測試和職場文化，彌合了玩家之間的代差，提升了年輕人的沉浸感。

WAIC_AI+IP_階躍星辰-3

“大模型也顛覆了傳統(tǒng) H5 游戲的開發(fā)業(yè)務(wù)流程，這個游戲從想法到開發(fā)完成僅用了兩周，而且我們大部分的精力都在模型訓(xùn)練上。其中最大的挑戰(zhàn)在于像《大鬧天宮》這樣稀缺的數(shù)字資產(chǎn)，可供訓(xùn)練的數(shù)據(jù)是非常有限的，我們用 Step-1X 圖像生成大模型在這里就發(fā)揮出了優(yōu)勢，使我們用極其少量的訓(xùn)練數(shù)據(jù)就可以實(shí)現(xiàn)質(zhì)量可觀的生成效果。”開發(fā)人員補(bǔ)充。“今年恰逢大鬧天宮推出 60 周年，也是階躍星辰第一次參加世界人工智能大會，所以有了這個創(chuàng)意。這次的小游戲只是一次試水，我們希望將來在更多的產(chǎn)品上，用多模態(tài)大模型的理解和生成能力為消費(fèi)者帶來全新的高維體驗(yàn)。”

讓國產(chǎn)模型講好中國故事任重道遠(yuǎn)但可期

值得一提的是，階躍星辰團(tuán)隊(duì)還與上海電影結(jié)合《葫蘆兄弟》的 IP進(jìn)行了視頻生成能力的展示。和《大鬧天宮》一樣，這部有著近 40 年歷史的剪紙動畫具備獨(dú)一無二的中國美術(shù)風(fēng)格，且可供訓(xùn)練的視頻資料非常有限。如何在極少的訓(xùn)練數(shù)據(jù)條件下，滿足對 IP 形象可控性要求極高的視頻生成，是階躍星辰團(tuán)隊(duì)和上海電影過去一個月集中攻堅(jiān)的關(guān)鍵任務(wù)。

最終，研發(fā)團(tuán)隊(duì)在這個課題上取得了階段性突破，實(shí)現(xiàn)了基于中國動畫風(fēng)格的 IP 可控生成。在雙方公布的視頻片段中，模型能夠讓“爺爺”噴火、讓“火娃”噴水，還能夠根據(jù)劇情指令高效創(chuàng)作出新的動畫，在人物動作、運(yùn)鏡感知等方面都有不錯的效果。

這次的技術(shù)展示僅是階躍星辰與上海電影戰(zhàn)略合作的開端。未來，雙方將持續(xù)探索，將 AI 技術(shù)應(yīng)用在更多的經(jīng)典 IP 和創(chuàng)新作品中，實(shí)現(xiàn)對創(chuàng)意、創(chuàng)作、展示、營銷和體驗(yàn)等各個環(huán)節(jié)的全面賦能，為中國影視行業(yè)提供新思路、新方向與新力量。

WAIC_AI+IP_階躍星辰-4