對(duì)話虛擬人柳夜熙幕后團(tuán)隊(duì)：想文化輸出海外，打造中國(guó)版漫威

　　元宇宙“引路人”？虛擬偶像百萬成本困境待解

　　新京報(bào)貝殼財(cái)經(jīng)記者 羅亦丹 李夢(mèng)涵

　　“我，叫柳夜熙”。

　　近期，新晉美妝達(dá)人柳夜熙出道視頻刷爆網(wǎng)絡(luò)，視頻特效部分高級(jí)感拉滿，虛擬人逼真生動(dòng)，發(fā)絲紋理、手部動(dòng)作幾乎與真人無異，虛擬人與現(xiàn)實(shí)人的交互也異常順滑。這位會(huì)捉妖的美妝達(dá)人視頻發(fā)布不到30小時(shí)，粉絲數(shù)一路猛漲至130萬。截至11月23日，首條視頻點(diǎn)贊量達(dá)到336.6萬，粉絲數(shù)也已經(jīng)達(dá)到536萬。

　　柳夜熙背后公司創(chuàng)壹科技的創(chuàng)始人謝多盛告訴貝殼財(cái)經(jīng)記者，此次兩分鐘的視頻僅是柳夜熙登場(chǎng)預(yù)告，后續(xù)故事將會(huì)以單集劇情的形式陸續(xù)在抖音發(fā)布。目前，創(chuàng)壹科技公司服務(wù)于柳夜熙背后的大中臺(tái)團(tuán)隊(duì)有150余人，小前臺(tái)團(tuán)隊(duì)人數(shù)則在10人以內(nèi)。

　　2007年，當(dāng)“初音未來”用電子合成音第一次唱歌，并被日本秋葉原宅男們稱為“公主殿下”時(shí)，不少人以為這只是二次元的狂歡。隨著“洛天依”走進(jìn)李佳琦直播間帶貨、“柳夜熙”一天吸引百萬粉絲，虛擬人已經(jīng)不知不覺進(jìn)入普通大眾生活。

　　今年，隨著元宇宙概念躥紅，作為其要素之一的虛擬人同樣被推至臺(tái)前。“2018年，當(dāng)我們進(jìn)入這一賽道時(shí)，很多人對(duì)什么是虛擬人根本不了解，但到了今年仿佛所有人都明白了，很多投資人也在尋找相關(guān)投資標(biāo)的?！贝问牢幕緞?chuàng)始人陳燕告訴新京報(bào)貝殼財(cái)經(jīng)記者。

　　貝殼財(cái)經(jīng)記者采訪虛擬人從業(yè)者了解到，目前虛擬人分為超寫實(shí)虛擬人、虛擬偶像和虛擬人交互產(chǎn)品三大類，并已在不同領(lǐng)域?qū)崿F(xiàn)商業(yè)價(jià)值。不過，每秒上千到幾萬的高昂制作成本、實(shí)時(shí)渲染技術(shù)難題以及難以逾越人腦的AI技術(shù)也成為虛擬人發(fā)展的瓶頸。

　　●打造

　　有虛擬偶像吸粉超千萬“幾分鐘視頻成本數(shù)萬元”

　　手舉偶像海報(bào)，一字排開，口中齊聲大喊“生日快樂”……11月2日前后，中科院大學(xué)、上海交大以及海外劍橋、紐約大學(xué)學(xué)生不約而同在B站上傳慶生視頻。粉絲應(yīng)援陣容強(qiáng)大，至于主人公，并非傳統(tǒng)意義上的真人，而是A-Soul的虛擬偶像“珈樂Carol”。

　　A-Soul是樂華娛樂2020年11月推出的虛擬偶像團(tuán)體，起初一度遭到原生虛擬主播粉絲的抵制，但開播不久后，其細(xì)膩的建模和“中之人”過硬的業(yè)務(wù)素質(zhì)，讓不少反對(duì)者“黑轉(zhuǎn)粉”。

　　一年時(shí)間，A-Soul團(tuán)隊(duì)已經(jīng)躋身B站頭部虛擬主播，其中成員“嘉然”B站粉絲數(shù)達(dá)到126萬。A-Soul走紅甚至衍生出“我真的好喜歡你啊”、“可愛捏”、“帶我走吧”等不少亞文化“梗”。

　　虛擬偶像團(tuán)體破圈，有著行業(yè)爆發(fā)的影子。根據(jù)B站董事長(zhǎng)陳睿公開的數(shù)字，2019年B站有超過32000名虛擬主播開播。

　　但是，扎堆進(jìn)場(chǎng)試水，并不意味著都能見到成功的曙光。一組公開數(shù)據(jù)顯示，截至2021年8月18日，B站相對(duì)有關(guān)注度的3472個(gè)虛擬主播中，1827人當(dāng)月營(yíng)收0元，也就是說，超過半數(shù)沒有一分錢入賬。

　　“實(shí)際上，只要設(shè)計(jì)出一套3D模型，再購買一套動(dòng)作捕捉設(shè)備，就可以成為初級(jí)虛擬偶像?！碧摂M偶像產(chǎn)業(yè)觀察者劉文（化名）告訴貝殼財(cái)經(jīng)記者，普通虛擬游戲主播采用的技術(shù)系基于面部動(dòng)作捕捉，換句話說，只要套上一個(gè)2D或3D的“皮”，就可以成為一名虛擬主播，并且能像真人主播一樣直播。

　　不過，劉文稱，動(dòng)捕設(shè)備和3D建模都需要成本，效果越好的設(shè)備和模型成本越高，這導(dǎo)致不少虛擬主播入不敷出。

　　火星文化創(chuàng)始人李浩早在2017年就啟動(dòng)了虛擬偶像業(yè)務(wù)，目前旗下虛擬形象“默默醬”在全網(wǎng)粉絲已經(jīng)超過1800萬。他對(duì)貝殼財(cái)經(jīng)記者表示，目前虛擬偶像在制作流程上大同小異，“首先使用建模工具制作3D模型并不斷迭代，再通過動(dòng)作捕捉技術(shù)驅(qū)動(dòng)人物模型的動(dòng)作，以及找一個(gè)‘中之人’?！?/p>

　　李浩告訴記者，目前絕大多數(shù)虛擬主播采用“中之人”和動(dòng)捕技術(shù)進(jìn)行直播?！啊跻粑磥怼汀逄煲馈畛醢l(fā)布時(shí)都是采用電子合成音，但從日本第二批虛擬偶像誕生開始，‘中之人’開始大量使用，這是因?yàn)楸仨氁屘摂M偶像在說話的時(shí)候更像人。目前在技術(shù)上，電子合成音說話和真人有相對(duì)較高的吻合度，但唱歌時(shí)就會(huì)產(chǎn)生明顯的技術(shù)壁壘，無法有效處理喘息、氣流音等效果，會(huì)讓觀眾覺得‘不對(duì)勁’，而采用動(dòng)捕技術(shù)可以有效地降低制作成本?！?/p>

　　實(shí)際上，虛擬偶像直播比真人直播要難上一個(gè)數(shù)量級(jí)。據(jù)了解，目前面部動(dòng)捕與身體動(dòng)捕屬于不同的技術(shù)，所以在極端情況下，當(dāng)一名虛擬偶像出現(xiàn)在直播間，其面部、身體要由兩個(gè)人分別攜帶動(dòng)捕設(shè)備。此外，還需要技術(shù)人員將兩塊動(dòng)捕動(dòng)畫進(jìn)行合成，再與“中之人”的語音錄制進(jìn)行音視頻合成，最終才能呈現(xiàn)出觀眾看到的直播間效果。

　　去年4月，“洛天依”與李佳琦同框直播的噱頭引發(fā)一波關(guān)注。直播過程中，一度出現(xiàn)李佳琦能聽到“洛天依”的聲音，觀眾卻聽不見的“翻車事故”。

　　李浩向記者介紹，虛擬偶像背后往往需要一個(gè)團(tuán)隊(duì)來支持，“以‘默默醬’為例，內(nèi)容團(tuán)隊(duì)有十個(gè)人，包括導(dǎo)演、劇本、動(dòng)捕人員、聲優(yōu)等。而技術(shù)方面，根據(jù)發(fā)布視頻的不同，動(dòng)畫師還要對(duì)‘默默醬’的模型進(jìn)行修改。一條普通的短視頻成本可能在6000元左右，幾分鐘的定制類視頻成本則要數(shù)萬元?！?/p>

　　如果說虛擬偶像的技術(shù)和動(dòng)畫團(tuán)隊(duì)可以替代，“中之人”毫無疑問是虛擬偶像的靈魂。樂元素2018年9月推出虛擬偶像企劃《戰(zhàn)斗吧歌姬！》，運(yùn)營(yíng)兩年多后，6位歌姬的“中之人”今年2月“畢業(yè)”，并在B站發(fā)布了告別視頻。此后，當(dāng)運(yùn)營(yíng)方宣布重新招募“中之人”，不少粉絲在留言中表示：“換‘中之人’還是舊皮的話不能接受?！?/p>

　　“我們和‘中之人’深度綁定，如果虛擬偶像沒有了‘中之人’，起碼要停更一個(gè)月，因?yàn)榧幢阏业叫碌穆晝?yōu)訓(xùn)練聲音，聊天沒問題，但唱歌很容易被看穿。”李浩說。

　　●瓶頸

　　柳夜熙燒錢爆紅背后：高昂成本與技術(shù)高墻

　　早在半年前，創(chuàng)壹科技就嗅到了元宇宙的風(fēng)口，并開始著手打造柳夜熙這一虛擬人IP，從市場(chǎng)定位、人物設(shè)定、人物制作、故事情節(jié)創(chuàng)作、拍攝執(zhí)行、后期制作等各個(gè)方面都經(jīng)過了不斷的打磨。柳夜熙的東方面孔、中國(guó)風(fēng)的妝容與捉妖師的身份契合了當(dāng)下盛行的國(guó)潮風(fēng)尚，同時(shí)妝容中熒光元素運(yùn)用、充滿科幻感的特效與賽博朋克風(fēng)格的后期色調(diào)又迎合了Z時(shí)代年輕人的喜好。

　　對(duì)于柳夜熙的走紅，創(chuàng)壹科技創(chuàng)始人謝多盛表示并不意外。團(tuán)隊(duì)復(fù)盤時(shí)也曾對(duì)此展開過討論：柳夜熙的爆紅50%是因?yàn)樵钪娴母拍顭岫龋?0%是因?yàn)槠?.5次元的設(shè)定和技術(shù)水平，20%是視頻創(chuàng)意和世界觀的搭建。目前市面上的虛擬人大多是以虛擬偶像的模式運(yùn)營(yíng)為主，可大致分為養(yǎng)成類、人格化類、二次元女團(tuán)等類型，虛擬人所處時(shí)空也多是二次元或者三次元。而創(chuàng)壹科技對(duì)于柳夜熙的定位則是2.5次元——二次元是純CG，三次元是現(xiàn)實(shí)世界，2.5次元?jiǎng)t是游離于二者之間的存在。

　　就當(dāng)前來看，柳夜熙等后續(xù)虛擬人IP的變現(xiàn)方式短期內(nèi)難以實(shí)現(xiàn)，僅靠燒錢能否維持其長(zhǎng)時(shí)間的運(yùn)轉(zhuǎn)仍要打上一個(gè)問號(hào)。但在創(chuàng)壹的戰(zhàn)略布局中，柳夜熙等后續(xù)虛擬人的變現(xiàn)方式主要有兩種——傳統(tǒng)IP經(jīng)濟(jì)和元宇宙未來的商業(yè)可能。

　　貝殼財(cái)經(jīng)記者注意到，目前進(jìn)行直播的虛擬偶像大多以二次元畫風(fēng)為主，而“柳夜熙”、“翎”等與真人觀感類似的虛擬偶像，更大程度上被稱為“超寫實(shí)虛擬人”，這類虛擬人往往并不直播，而是出現(xiàn)在微博、抖音、小紅書等社交平臺(tái)，像網(wǎng)紅一樣通過自己的照片和視頻吸引粉絲，接商業(yè)代言。

　　“我們不做傳統(tǒng)的二次元，也不碰虛擬主播的領(lǐng)域?！薄棒帷钡闹谱鞣?、次世文化公司創(chuàng)始人陳燕告訴貝殼財(cái)經(jīng)記者，“我們推出的虛擬人主要應(yīng)用在泛娛樂領(lǐng)域、品牌領(lǐng)域，粉絲也大多是比較關(guān)注時(shí)尚生活的群體，如果說二次元虛擬偶像的粉絲可以類比B站粉絲，那么超寫實(shí)虛擬人的粉絲與小紅書的粉絲構(gòu)成更相似?！?/p>

　　貝殼財(cái)經(jīng)記者梳理看到，以“翎”這種中國(guó)風(fēng)超寫實(shí)虛擬人為例，所接商業(yè)廣告大多與時(shí)尚明星近似，包括奢侈品和美妝品牌等。

　　相比二次元虛擬偶像，超寫實(shí)虛擬人的視頻制作成本也上了一個(gè)臺(tái)階?！傲刮酢眻F(tuán)隊(duì)接受貝殼財(cái)經(jīng)記者采訪時(shí)表示，推出“柳夜熙”之前的半年多時(shí)間，研發(fā)成本、人員成本、技術(shù)成本等投入“遠(yuǎn)超百萬”。

　　陳燕向貝殼財(cái)經(jīng)記者透露，為了覆蓋成本，公司內(nèi)部做了非常嚴(yán)格的產(chǎn)品規(guī)劃，在下場(chǎng)每一個(gè)產(chǎn)品之前，會(huì)做五六個(gè)步驟的內(nèi)部評(píng)估，包含每一個(gè)IP在什么場(chǎng)景使用它，企圖打造的一個(gè)IP是什么級(jí)別。“以‘翎’為例，我們會(huì)細(xì)化到將視頻拆解成15秒、1分到2分鐘，一個(gè)季度策劃一次大事件等，否則如果周更或者日更的話，根本就無法覆蓋成本。”

　　事實(shí)上，國(guó)內(nèi)較早亮相的寫實(shí)類虛擬人可以追溯至2018年5月，NExT Studios與Epic聯(lián)合推出的高保真數(shù)字虛擬人塞壬（Siren）。該項(xiàng)目研發(fā)過程中，可以看到虛擬人行業(yè)技術(shù)昂貴的一面。

　　騰訊互娛工程師David 曾在《虛擬數(shù)字人Siren的誕生》一文中用“艱難”一詞來形容塞壬項(xiàng)目，“電影畫面一幀動(dòng)輒幾小時(shí)的渲染時(shí)間，相比于電影行業(yè)，我們所有的計(jì)算都必須在當(dāng)時(shí)發(fā)生。虛擬人的程序以60幀每秒運(yùn)行，所有的計(jì)算都必須在16毫秒的時(shí)間段內(nèi)做完。”最終，來自四個(gè)國(guó)家的頂級(jí)團(tuán)隊(duì)克服軟硬件等各方面帶來的技術(shù)瓶頸后，完成了這一項(xiàng)目。

　　目前大部分超寫實(shí)虛擬人項(xiàng)目仍然難以做到實(shí)時(shí)直播?！艾F(xiàn)在市面上能做到實(shí)時(shí)的（虛擬人）基本上都是風(fēng)格化的角色，寫實(shí)風(fēng)格的通常都是用離線CG流程做的視頻，有的只是拿虛幻引擎作為渲染器用，我們一直堅(jiān)守在實(shí)時(shí)+寫實(shí)這條線上，因?yàn)槲覀兊哪繕?biāo)就是將寫實(shí)數(shù)字人做到實(shí)時(shí)，落地在實(shí)時(shí)交互的場(chǎng)景?！盢ExT Studios新技術(shù)研發(fā)中心副總監(jiān)葛誠(chéng)說。

　　隨著技術(shù)迭代，超寫實(shí)虛擬人的應(yīng)用場(chǎng)景將越來越廣泛。6月20日，新華社和騰訊聯(lián)合推出數(shù)字航天員、數(shù)字記者“小諍”，這名超寫實(shí)虛擬人將承擔(dān)起普通記者難以實(shí)現(xiàn)的載人航天工程、行星探測(cè)工程“現(xiàn)場(chǎng)報(bào)道”任務(wù)。葛誠(chéng)告訴貝殼財(cái)經(jīng)記者，NExT數(shù)字人團(tuán)隊(duì)一直維持在20個(gè)人以內(nèi)。

　　●變革

　　虛擬人+AI會(huì)成為元宇宙“引路人”嗎？

　　隨著技術(shù)發(fā)展，超寫實(shí)虛擬人、虛擬偶像甚至智能交互產(chǎn)品的界限已經(jīng)逐漸模糊，未來虛擬人領(lǐng)域能否實(shí)現(xiàn)技術(shù)上的“統(tǒng)一”，帶給市場(chǎng)很大想象空間。

　　騰訊互娛方面表示，在疫情這類“黑天鵝”事件下，人和人之間被隔離開，會(huì)越發(fā)地需要進(jìn)行互動(dòng)、連接，虛擬人和虛擬世界就不只是作為娛樂的場(chǎng)景，需要考慮人類之間的社會(huì)性、依賴性，數(shù)字人能夠發(fā)揮更大的社會(huì)價(jià)值?！靶≌姟背藬?shù)字航天員和數(shù)字記者身份外，未來也將會(huì)進(jìn)行更多面向用戶、年輕人的互動(dòng)。“小諍”被越來越多朋友所認(rèn)識(shí)、喜愛后，也可以成為代表主流價(jià)值觀的當(dāng)代年輕人“虛擬偶像”之一。

　　“實(shí)際上，相比虛擬人漂亮的外表，能夠跟用戶產(chǎn)生持續(xù)的交流更重要?！标愌嗾f，他的愿景是在守好已有業(yè)務(wù)線的情況下，追求與用戶交互以及虛擬IP的智能化和場(chǎng)景化，發(fā)展為一家“虛擬人生態(tài)”公司。

　　“目前，次世文化正在跟‘小冰’等頂尖AI公司合作，力圖拓展更多智能化的虛擬產(chǎn)品，也就是說虛擬人既是IP，但也會(huì)加入很多AI智能功能，來滿足各種細(xì)分場(chǎng)景的需求。”他說。

　　人物建模、實(shí)時(shí)渲染和語音識(shí)別、動(dòng)作識(shí)別等技術(shù)發(fā)展，讓不少從業(yè)者看到了虛擬人未來的應(yīng)用前景。2021世界人工智能大會(huì)開幕式上，接連出現(xiàn)四個(gè)虛擬人與真人主持同臺(tái)出場(chǎng)——B站虛擬偶像“泠鳶”，百度的“小度”，小米的“小愛同學(xué)”和微軟的“小冰”。其中，后三位虛擬人均已有自己的應(yīng)用場(chǎng)景，比如用戶可以通過喊“小愛同學(xué)”在小愛音箱上實(shí)現(xiàn)點(diǎn)歌。

　　貝殼財(cái)經(jīng)記者看到，當(dāng)前不少虛擬人產(chǎn)品已經(jīng)在市面上進(jìn)行推廣，如科大訊飛、相芯科技等公司相繼推出TO B的虛擬人產(chǎn)品。

　　有虛擬人產(chǎn)品銷售業(yè)務(wù)人員告訴貝殼財(cái)經(jīng)記者，使用其提供的成品虛擬新聞主播，費(fèi)用一年為100萬元左右，虛擬主播可以根據(jù)輸入的文字內(nèi)容自動(dòng)生成適配的語音和表情，從而把文字報(bào)道轉(zhuǎn)換為視頻播報(bào)。“如果定制自己形象的虛擬主播則需要幾百萬，因?yàn)槲覀冃枰獙?duì)你們提供的模特進(jìn)行動(dòng)捕和算法分析?！?/p>

　　“很多人看虛擬人，只看到了表象的東西，但我一直覺得虛擬人只是一個(gè)載體，最終推動(dòng)虛擬人發(fā)展的是人的需求?，F(xiàn)實(shí)世界中，當(dāng)一個(gè)人身體存在缺陷，通過構(gòu)建自身的虛擬形象，可以在虛擬世界里重新選擇（自身形象）。通過AI技術(shù)，一個(gè)虛擬人IP也應(yīng)該跟人類建立起更穩(wěn)固的關(guān)系。”陳燕說。

　　京東集團(tuán)副總裁梅濤接受貝殼財(cái)經(jīng)記者采訪時(shí)稱，虛擬數(shù)字人的AI技術(shù)可能會(huì)在未來產(chǎn)生顛覆性效果?！耙跃〇|自己的數(shù)字人為例，既有2D和3D卡通數(shù)字人，也有真人數(shù)字人。數(shù)字人涉及的技術(shù)非常廣，既包括視覺和語音識(shí)別，還有語音合成和對(duì)話、圖形學(xué)。未來我們希望數(shù)字人能夠真正完成一些任務(wù)，比如跟小孩聊天、陪伴老人、市民熱線、智能客服等，為此我們基于京東電商場(chǎng)景中智能客服的豐富實(shí)踐，來打造富有自己特色的數(shù)字人，希望未來一到兩年形成比較成熟的標(biāo)準(zhǔn)化服務(wù)。大家也可以看到，現(xiàn)在也有很多初創(chuàng)公司在做數(shù)字人，經(jīng)過幾年發(fā)展，可以說數(shù)字人技術(shù)和產(chǎn)品快要到一個(gè)爆發(fā)期?！?/p>

　　據(jù)了解，2018年SIGGRAPH Asia展臺(tái)上，“塞壬”曾經(jīng)展示過以AI驅(qū)動(dòng)的樣片，但當(dāng)時(shí)AI只能做一輪對(duì)話。

　　“現(xiàn)在AI已經(jīng)可以實(shí)現(xiàn)多輪對(duì)話了，更加智能，AI驅(qū)動(dòng)數(shù)字人，未來可期。虛實(shí)融合是未來大趨勢(shì)，數(shù)字人逐漸能和真實(shí)世界發(fā)生情感上的共鳴，就可以作為社會(huì)的一分子存在，想想我們小時(shí)候看的變形金剛、圣斗士、機(jī)器貓、葫蘆娃都是虛擬角色，也成為了影響我們那一代人的IP。隨著數(shù)字人蓬勃發(fā)展，可以預(yù)見未來會(huì)有更多和這個(gè)真實(shí)社會(huì)產(chǎn)生紐帶的虛擬角色?！兄恕悄壳皵?shù)字人逃脫不開的話題，但是相信未來，AI在某些特定領(lǐng)域能更好地驅(qū)動(dòng)數(shù)字人?！备鹫\(chéng)表示。

　　“虛擬偶像能直播，必須要有‘中之人’。超寫實(shí)虛擬人像人，不能直播‘沒有靈魂’。手機(jī)里的智能語音可以交互，但交互水平還太低?！眲⑽膶?duì)貝殼財(cái)經(jīng)記者表示，如果把虛擬偶像、超寫實(shí)虛擬人和市場(chǎng)上已有的虛擬助手融合在一起，這可能就是虛擬人通向元宇宙的未來。

關(guān)鍵詞 : 元宇宙虛擬偶像