近期，新晉美妝達(dá)人柳夜熙出道視頻刷爆網(wǎng)絡(luò)，視頻特效部分高級感拉滿，虛擬人逼真生動(dòng)，發(fā)絲紋理、手部動(dòng)作幾乎與真人無異，虛擬人與現(xiàn)實(shí)人的交互也異常順滑。這位會(huì)捉妖的美妝達(dá)人視頻發(fā)布不到30小時(shí)，粉絲數(shù)一路猛漲至130萬。截至11月23日，首條視頻點(diǎn)贊量達(dá)到336.6萬，粉絲數(shù)也已經(jīng)達(dá)到536萬。
柳夜熙背后公司創(chuàng)壹科技的創(chuàng)始人謝多盛告訴貝殼財(cái)經(jīng)記者，此次兩分鐘的視頻僅是柳夜熙登場預(yù)告，后續(xù)故事將會(huì)以單集劇情的形式陸續(xù)在抖音發(fā)布。
目前，創(chuàng)壹科技公司服務(wù)于柳夜熙背后的大中臺團(tuán)隊(duì)有150余人，小前臺團(tuán)隊(duì)人數(shù)則在10人以內(nèi)。
2007年，當(dāng)“初音未來”用電子合成音第一次唱歌，并被日本秋葉原宅男們稱為“公主殿下”時(shí)，不少人以為這只是二次元的狂歡。隨著“洛天依”走進(jìn)李佳琦直播間帶貨、“柳夜熙”一天吸引百萬粉絲，虛擬人已經(jīng)不知不覺進(jìn)入普通大眾生活。
今年，隨著元宇宙概念躥紅，作為其要素之一的虛擬人同樣被推至臺前。
“2018年，當(dāng)我們進(jìn)入這一賽道時(shí)，很多人對什么是虛擬人根本不了解，但到了今年仿佛所有人都明白了，很多投資人也在尋找相關(guān)投資標(biāo)的。”次世文化公司創(chuàng)始人陳燕告訴新京報(bào)貝殼財(cái)經(jīng)記者。
貝殼財(cái)經(jīng)記者采訪虛擬人從業(yè)者了解到，目前虛擬人分為超寫實(shí)虛擬人、虛擬偶像和虛擬人交互產(chǎn)品三大類，并已在不同領(lǐng)域?qū)崿F(xiàn)商業(yè)價(jià)值。
不過，每秒上千到幾萬的高昂制作成本、實(shí)時(shí)渲染技術(shù)難題以及難以逾越人腦的AI技術(shù)也成為虛擬人發(fā)展的瓶頸。
●打造
有虛擬偶像吸粉超千萬“幾分鐘視頻成本數(shù)萬元”
手舉偶像海報(bào)，一字排開，口中齊聲大喊“生日快樂”……11月2日前后，中科院大學(xué)、上海交大以及海外劍橋、紐約大學(xué)學(xué)生不約而同在B站上傳慶生視頻。
粉絲應(yīng)援陣容強(qiáng)大，至于主人公，并非傳統(tǒng)意義上的真人，而是A-Soul的虛擬偶像“珈樂Carol”。
A-Soul是樂華娛樂2020年11月推出的虛擬偶像團(tuán)體，起初一度遭到原生虛擬主播粉絲的抵制，但開播不久后，其細(xì)膩的建模和“中之人”過硬的業(yè)務(wù)素質(zhì)，讓不少反對者“黑轉(zhuǎn)粉”。
一年時(shí)間，A-Soul團(tuán)隊(duì)已經(jīng)躋身B站頭部虛擬主播，其中成員“嘉然”B站粉絲數(shù)達(dá)到126萬。A-Soul走紅甚至衍生出“我真的好喜歡你啊”、“可愛捏”、“帶我走吧”等不少亞文化“梗”。
虛擬偶像團(tuán)體破圈，有著行業(yè)爆發(fā)的影子。根據(jù)B站董事長陳睿公開的數(shù)字，2019年B站有超過32000名虛擬主播開播。
但是，扎堆進(jìn)場試水，并不意味著都能見到成功的曙光。一組公開數(shù)據(jù)顯示，截至2021年8月18日，B站相對有關(guān)注度的3472個(gè)虛擬主播中，1827人當(dāng)月營收0元，也就是說，超過半數(shù)沒有一分錢入賬。
“實(shí)際上，只要設(shè)計(jì)出一套3D模型，再購買一套動(dòng)作捕捉設(shè)備，就可以成為初級虛擬偶像。”
虛擬偶像產(chǎn)業(yè)觀察者劉文（化名）告訴貝殼財(cái)經(jīng)記者，普通虛擬游戲主播采用的技術(shù)系基于面部動(dòng)作捕捉，換句話說，只要套上一個(gè)2D或3D的“皮”，就可以成為一名虛擬主播，并且能像真人主播一樣直播。
不過，劉文稱，動(dòng)捕設(shè)備和3D建模都需要成本，效果越好的設(shè)備和模型成本越高，這導(dǎo)致不少虛擬主播入不敷出。
火星文化創(chuàng)始人李浩早在2017年就啟動(dòng)了虛擬偶像業(yè)務(wù)，目前旗下虛擬形象“默默醬”在全網(wǎng)粉絲已經(jīng)超過1800萬。他對貝殼財(cái)經(jīng)記者表示，目前虛擬偶像在制作流程上大同小異，“首先使用建模工具制作3D模型并不斷迭代，再通過動(dòng)作捕捉技術(shù)驅(qū)動(dòng)人物模型的動(dòng)作，以及找一個(gè)‘中之人’。”
李浩告訴記者，目前絕大多數(shù)虛擬主播采用“中之人”和動(dòng)捕技術(shù)進(jìn)行直播。“‘初音未來’和‘洛天依’最初發(fā)布時(shí)都是采用電子合成音，但從日本第二批虛擬偶像誕生開始，‘中之人’開始大量使用，這是因?yàn)楸仨氁屘摂M偶像在說話的時(shí)候更像人。
目前在技術(shù)上，電子合成音說話和真人有相對較高的吻合度，但唱歌時(shí)就會(huì)產(chǎn)生明顯的技術(shù)壁壘，無法有效處理喘息、氣流音等效果，會(huì)讓觀眾覺得‘不對勁’，而采用動(dòng)捕技術(shù)可以有效地降低制作成本。”
實(shí)際上，虛擬偶像直播比真人直播要難上一個(gè)數(shù)量級。據(jù)了解，目前面部動(dòng)捕與身體動(dòng)捕屬于不同的技術(shù)，所以在極端情況下，當(dāng)一名虛擬偶像出現(xiàn)在直播間，其面部、身體要由兩個(gè)人分別攜帶動(dòng)捕設(shè)備。此外，還需要技術(shù)人員將兩塊動(dòng)捕動(dòng)畫進(jìn)行合成，再與“中之人”的語音錄制進(jìn)行音視頻合成，最終才能呈現(xiàn)出觀眾看到的直播間效果。
去年4月，“洛天依”與李佳琦同框直播的噱頭引發(fā)一波關(guān)注。直播過程中，一度出現(xiàn)李佳琦能聽到“洛天依”的聲音，觀眾卻聽不見的“翻車事故”。
李浩向記者介紹，虛擬偶像背后往往需要一個(gè)團(tuán)隊(duì)來支持，“以‘默默醬’為例，內(nèi)容團(tuán)隊(duì)有十個(gè)人，包括導(dǎo)演、劇本、動(dòng)捕人員、聲優(yōu)等。而技術(shù)方面，根據(jù)發(fā)布視頻的不同，動(dòng)畫師還要對‘默默醬’的模型進(jìn)行修改。一條普通的短視頻成本可能在6000元左右，幾分鐘的定制類視頻成本則要數(shù)萬元。”
如果說虛擬偶像的技術(shù)和動(dòng)畫團(tuán)隊(duì)可以替代，“中之人”毫無疑問是虛擬偶像的靈魂。樂元素2018年9月推出虛擬偶像企劃《戰(zhàn)斗吧歌姬！》，運(yùn)營兩年多后，6位歌姬的“中之人”今年2月“畢業(yè)”，并在B站發(fā)布了告別視頻。此后，當(dāng)運(yùn)營方宣布重新招募“中之人”，不少粉絲在留言中表示：“換‘中之人’還是舊皮的話不能接受。”
“我們和‘中之人’深度綁定，如果虛擬偶像沒有了‘中之人’，起碼要停更一個(gè)月，因?yàn)榧幢阏业叫碌穆晝?yōu)訓(xùn)練聲音，聊天沒問題，但唱歌很容易被看穿。”李浩說。
●瓶頸
柳夜熙燒錢爆紅背后：高昂成本與技術(shù)高墻
早在半年前，創(chuàng)壹科技就嗅到了元宇宙的風(fēng)口，并開始著手打造柳夜熙這一虛擬人IP，從市場定位、人物設(shè)定、人物制作、故事情節(jié)創(chuàng)作、拍攝執(zhí)行、后期制作等各個(gè)方面都經(jīng)過了不斷的打磨。
柳夜熙的東方面孔、中國風(fēng)的妝容與捉妖師的身份契合了當(dāng)下盛行的國潮風(fēng)尚，同時(shí)妝容中熒光元素運(yùn)用、充滿科幻感的特效與賽博朋克風(fēng)格的后期色調(diào)又迎合了Z時(shí)代年輕人的喜好。
對于柳夜熙的走紅，創(chuàng)壹科技創(chuàng)始人謝多盛表示并不意外。團(tuán)隊(duì)復(fù)盤時(shí)也曾對此展開過討論：柳夜熙的爆紅50%是因?yàn)樵钪娴母拍顭岫龋?0%是因?yàn)槠?.5次元的設(shè)定和技術(shù)水平，20%是視頻創(chuàng)意和世界觀的搭建。目前市面上的虛擬人大多是以虛擬偶像的模式運(yùn)營為主，可大致分為養(yǎng)成類、人格化類、二次元女團(tuán)等類型，虛擬人所處時(shí)空也多是二次元或者三次元。
而創(chuàng)壹科技對于柳夜熙的定位則是2.5次元——二次元是純CG，三次元是現(xiàn)實(shí)世界，2.5次元?jiǎng)t是游離于二者之間的存在。
就當(dāng)前來看，柳夜熙等后續(xù)虛擬人IP的變現(xiàn)方式短期內(nèi)難以實(shí)現(xiàn)，僅靠燒錢能否維持其長時(shí)間的運(yùn)轉(zhuǎn)仍要打上一個(gè)問號。
但在創(chuàng)壹的戰(zhàn)略布局中，柳夜熙等后續(xù)虛擬人的變現(xiàn)方式主要有兩種——傳統(tǒng)IP經(jīng)濟(jì)和元宇宙未來的商業(yè)可能。
貝殼財(cái)經(jīng)記者注意到，目前進(jìn)行直播的虛擬偶像大多以二次元畫風(fēng)為主，而“柳夜熙”、“翎”等與真人觀感類似的虛擬偶像，
更大程度上被稱為“超寫實(shí)虛擬人”，這類虛擬人往往并不直播，而是出現(xiàn)在微博、抖音、小紅書等社交平臺，像網(wǎng)紅一樣通過自己的照片和視頻吸引粉絲，接商業(yè)代言。
“我們不做傳統(tǒng)的二次元，也不碰虛擬主播的領(lǐng)域。”“翎”的制作方、次世文化公司創(chuàng)始人陳燕告訴貝殼財(cái)經(jīng)記者，“我們推出的虛擬人主要應(yīng)用在泛娛樂領(lǐng)域、品牌領(lǐng)域，粉絲也大多是比較關(guān)注時(shí)尚生活的群體，如果說二次元虛擬偶像的粉絲可以類比B站粉絲，那么超寫實(shí)虛擬人的粉絲與小紅書的粉絲構(gòu)成更相似。”
貝殼財(cái)經(jīng)記者梳理看到，以“翎”這種中國風(fēng)超寫實(shí)虛擬人為例，所接商業(yè)廣告大多與時(shí)尚明星近似，包括奢侈品和美妝品牌等。
相比二次元虛擬偶像，超寫實(shí)虛擬人的視頻制作成本也上了一個(gè)臺階。
“柳夜熙”團(tuán)隊(duì)接受貝殼財(cái)經(jīng)記者采訪時(shí)表示，推出“柳夜熙”之前的半年多時(shí)間，研發(fā)成本、人員成本、技術(shù)成本等投入“遠(yuǎn)超百萬”。
陳燕向貝殼財(cái)經(jīng)記者透露，為了覆蓋成本，公司內(nèi)部做了非常嚴(yán)格的產(chǎn)品規(guī)劃，在下場每一個(gè)產(chǎn)品之前，會(huì)做五六個(gè)步驟的內(nèi)部評估，包含每一個(gè)IP在什么場景使用它，企圖打造的一個(gè)IP是什么級別。“以‘翎’為例，我們會(huì)細(xì)化到將視頻拆解成15秒、1分到2分鐘，一個(gè)季度策劃一次大事件等，否則如果周更或者日更的話，根本就無法覆蓋成本。”
事實(shí)上，國內(nèi)較早亮相的寫實(shí)類虛擬人可以追溯至2018年5月，NExT Studios與Epic聯(lián)合推出的高保真數(shù)字虛擬人塞壬（Siren）。該項(xiàng)目研發(fā)過程中，可以看到虛擬人行業(yè)技術(shù)昂貴的一面。
騰訊互娛工程師David 曾在《虛擬數(shù)字人Siren的誕生》一文中用“艱難”一詞來形容塞壬項(xiàng)目，“電影畫面一幀動(dòng)輒幾小時(shí)的渲染時(shí)間，相比于電影行業(yè)，我們所有的計(jì)算都必須在當(dāng)時(shí)發(fā)生。虛擬人的程序以60幀每秒運(yùn)行，所有的計(jì)算都必須在16毫秒的時(shí)間段內(nèi)做完。”
最終，來自四個(gè)國家的頂級團(tuán)隊(duì)克服軟硬件等各方面帶來的技術(shù)瓶頸后，完成了這一項(xiàng)目。
目前大部分超寫實(shí)虛擬人項(xiàng)目仍然難以做到實(shí)時(shí)直播。“現(xiàn)在市面上能做到實(shí)時(shí)的（虛擬人）基本上都是風(fēng)格化的角色，寫實(shí)風(fēng)格的通常都是用離線CG流程做的視頻，有的只是拿虛幻引擎作為渲染器用，我們一直堅(jiān)守在實(shí)時(shí)+寫實(shí)這條線上，因?yàn)槲覀兊哪繕?biāo)就是將寫實(shí)數(shù)字人做到實(shí)時(shí)，落地在實(shí)時(shí)交互的場景。”
NExT Studios新技術(shù)研發(fā)中心副總監(jiān)葛誠說。
隨著技術(shù)迭代，超寫實(shí)虛擬人的應(yīng)用場景將越來越廣泛。6月20日，新華社和騰訊聯(lián)合推出數(shù)字航天員、數(shù)字記者“小諍”，這名超寫實(shí)虛擬人將承擔(dān)起普通記者難以實(shí)現(xiàn)的載人航天工程、行星探測工程“現(xiàn)場報(bào)道”任務(wù)。葛誠告訴貝殼財(cái)經(jīng)記者，NExT數(shù)字人團(tuán)隊(duì)一直維持在20個(gè)人以內(nèi)。
●變革
虛擬人+AI會(huì)成為元宇宙“引路人”嗎？
隨著技術(shù)發(fā)展，超寫實(shí)虛擬人、虛擬偶像甚至智能交互產(chǎn)品的界限已經(jīng)逐漸模糊，未來虛擬人領(lǐng)域能否實(shí)現(xiàn)技術(shù)上的“統(tǒng)一”，帶給市場很大想象空間。
騰訊互娛方面表示，在疫情這類“黑天鵝”事件下，人和人之間被隔離開，會(huì)越發(fā)地需要進(jìn)行互動(dòng)、連接，虛擬人和虛擬世界就不只是作為娛樂的場景，需要考慮人類之間的社會(huì)性、依賴性，數(shù)字人能夠發(fā)揮更大的社會(huì)價(jià)值。“小諍”除了數(shù)字航天員和數(shù)字記者身份外，未來也將會(huì)進(jìn)行更多面向用戶、年輕人的互動(dòng)。
“小諍”被越來越多朋友所認(rèn)識、喜愛后，也可以成為代表主流價(jià)值觀的當(dāng)代年輕人“虛擬偶像”之一。
“實(shí)際上，相比虛擬人漂亮的外表，能夠跟用戶產(chǎn)生持續(xù)的交流更重要。”陳燕說，他的愿景是在守好已有業(yè)務(wù)線的情況下，追求與用戶交互以及虛擬IP的智能化和場景化，發(fā)展為一家“虛擬人生態(tài)”公司。
“目前，次世文化正在跟‘小冰’等頂尖AI公司合作，力圖拓展更多智能化的虛擬產(chǎn)品，也就是說虛擬人既是IP，但也會(huì)加入很多AI智能功能，來滿足各種細(xì)分場景的需求。”他說。
人物建模、實(shí)時(shí)渲染和語音識別、動(dòng)作識別等技術(shù)發(fā)展，讓不少從業(yè)者看到了虛擬人未來的應(yīng)用前景。
2021世界人工智能大會(huì)開幕式上，接連出現(xiàn)四個(gè)虛擬人與真人主持同臺出場——B站虛擬偶像“泠鳶”，百度的“小度”，小米的“小愛同學(xué)”和微軟的“小冰”。其中，后三位虛擬人均已有自己的應(yīng)用場景，比如用戶可以通過喊“小愛同學(xué)”在小愛音箱上實(shí)現(xiàn)點(diǎn)歌。
貝殼財(cái)經(jīng)記者看到，當(dāng)前不少虛擬人產(chǎn)品已經(jīng)在市面上進(jìn)行推廣，如科大訊飛、相芯科技等公司相繼推出TO B的虛擬人產(chǎn)品。
有虛擬人產(chǎn)品銷售業(yè)務(wù)人員告訴貝殼財(cái)經(jīng)記者，使用其提供的成品虛擬新聞主播，費(fèi)用一年為100萬元左右，虛擬主播可以根據(jù)輸入的文字內(nèi)容自動(dòng)生成適配的語音和表情，從而把文字報(bào)道轉(zhuǎn)換為視頻播報(bào)。“如果定制自己形象的虛擬主播則需要幾百萬，因?yàn)槲覀冃枰獙δ銈兲峁┑哪Ｌ剡M(jìn)行動(dòng)捕和算法分析。”
“很多人看虛擬人，只看到了表象的東西，但我一直覺得虛擬人只是一個(gè)載體，最終推動(dòng)虛擬人發(fā)展的是人的需求。
現(xiàn)實(shí)世界中，當(dāng)一個(gè)人身體存在缺陷，通過構(gòu)建自身的虛擬形象，可以在虛擬世界里重新選擇（自身形象）。通過AI技術(shù)，一個(gè)虛擬人IP也應(yīng)該跟人類建立起更穩(wěn)固的關(guān)系。”陳燕說。
京東集團(tuán)副總裁梅濤接受貝殼財(cái)經(jīng)記者采訪時(shí)稱，虛擬數(shù)字人的AI技術(shù)可能會(huì)在未來產(chǎn)生顛覆性效果。
“以京東自己的數(shù)字人為例，既有2D和3D卡通數(shù)字人，也有真人數(shù)字人。數(shù)字人涉及的技術(shù)非常廣，既包括視覺和語音識別，還有語音合成和對話、圖形學(xué)。未來我們希望數(shù)字人能夠真正完成一些任務(wù)，比如跟小孩聊天、陪伴老人、市民熱線、智能客服等，為此我們基于京東電商場景中智能客服的豐富實(shí)踐，來打造富有自己特色的數(shù)字人，希望未來一到兩年形成比較成熟的標(biāo)準(zhǔn)化服務(wù)。
大家也可以看到，現(xiàn)在也有很多初創(chuàng)公司在做數(shù)字人，經(jīng)過幾年發(fā)展，可以說數(shù)字人技術(shù)和產(chǎn)品快要到一個(gè)爆發(fā)期。”
據(jù)了解，2018年SIGGRAPH Asia展臺上，“塞壬”曾經(jīng)展示過以AI驅(qū)動(dòng)的樣片，但當(dāng)時(shí)AI只能做一輪對話。
“現(xiàn)在AI已經(jīng)可以實(shí)現(xiàn)多輪對話了，更加智能，AI驅(qū)動(dòng)數(shù)字人，未來可期。虛實(shí)融合是未來大趨勢，數(shù)字人逐漸能和真實(shí)世界發(fā)生情感上的共鳴，就可以作為社會(huì)的一分子存在，想想我們小時(shí)候看的變形金剛、圣斗士、機(jī)器貓、葫蘆娃都是虛擬角色，也成為了影響我們那一代人的IP。隨著數(shù)字人蓬勃發(fā)展，可以預(yù)見未來會(huì)有更多和這個(gè)真實(shí)社會(huì)產(chǎn)生紐帶的虛擬角色。
‘中之人’是目前數(shù)字人逃脫不開的話題，但是相信未來，AI在某些特定領(lǐng)域能更好地驅(qū)動(dòng)數(shù)字人。”葛誠表示。
“虛擬偶像能直播，必須要有‘中之人’。超寫實(shí)虛擬人像人，不能直播‘沒有靈魂’。
手機(jī)里的智能語音可以交互，但交互水平還太低。”劉文對貝殼財(cái)經(jīng)記者表示，如果把虛擬偶像、超寫實(shí)虛擬人和市場上已有的虛擬助手融合在一起，這可能就是虛擬人通向元宇宙的未來。
