Ben Kee是位于新加坡的Anomalyst?Studio的創(chuàng)始人,創(chuàng)意總監(jiān)和執(zhí)行制片人。該工作室參與了2021年全球電子競技運(yùn)動會開幕式上混合現(xiàn)實(shí)的現(xiàn)場表演的制作。混合現(xiàn)實(shí)表演是虛擬制作和傳統(tǒng)實(shí)時(shí)制作的結(jié)合,在這場演出中Xsens的動作捕捉技術(shù)起到了至關(guān)重要的作用。Kee在本文中解釋了如今人們?yōu)楹卧絹碓蕉嗟匦枰摂M音樂會不僅僅是數(shù)字模仿,因?yàn)樘摂M演唱會能夠?yàn)橛^眾提供一種獨(dú)立的體驗(yàn)。
游戲是如何推動虛擬制片的
“Anomalyst是一家多媒體公司,主要為現(xiàn)場活動制作內(nèi)容。在過去的兩年里,新冠肺炎疫情限制了現(xiàn)場活動的舉辦。”為了解決這個(gè)問題,Anomalyst Studio不得不改變工作重心。“我們不得不轉(zhuǎn)向虛擬生產(chǎn)。我們從綠屏解決方案、虛擬背景開始,嘗試使用虛幻引擎和其他游戲引擎來創(chuàng)建內(nèi)容。”
當(dāng)Anomalyst工作室決定將重點(diǎn)轉(zhuǎn)移到虛擬活動制作時(shí),動作捕捉技術(shù)已經(jīng)在他們的管道中了。“我們的合作伙伴有是演員和音樂家,他們一直在尋找在流媒體上表演的方式,所以他們現(xiàn)在仍然能夠在疫情期間工作,”Kee說。“對虛擬制作的需求讓我們萌生了一個(gè)想法,那就是使用游戲引擎、表演者和動作捕捉來改善我們的現(xiàn)場直播方式。”在2021年全球電子競技運(yùn)動會(Global Esports Games 2021)上創(chuàng)作ShiGGa Shay的混合現(xiàn)實(shí)表演時(shí),工作室不得不思考如何將表演融合在一起,因?yàn)樾碌男问揭馕吨跐M足開幕式目標(biāo)方面存在新的挑戰(zhàn)。
歌手ShiGGa Shay表演歌曲
首次使用動捕技術(shù)制作現(xiàn)場表演
成為第一個(gè)為現(xiàn)場表演制作混合現(xiàn)實(shí)表演的工作室本身就是一個(gè)壯舉,但成為一個(gè)像電子競技一樣快速發(fā)展的行業(yè)的第一人更是非同尋常。2021年,全球范圍內(nèi)的電子競技觀眾達(dá)到4.74億人,預(yù)計(jì)到2024年將達(dá)到5.77億人。Anomalyst自己也在向大量觀眾表演。成為先鋒會帶來一系列挑戰(zhàn)。“按照要求制定計(jì)劃是相當(dāng)困難的,但謝天謝地,我們的客戶給了我們創(chuàng)作的自由。”從虛擬資產(chǎn)的時(shí)間和設(shè)置到真實(shí)的物流問題,Anomalyst工作室接受了挑戰(zhàn):“虛擬制作的表演對我們和我們的客戶來說是一種新的挑戰(zhàn)”,Kee解釋說。“我們在全球電子競技運(yùn)動會的現(xiàn)場開始布置場地與設(shè)備是在活動開始前三天,當(dāng)時(shí)我們進(jìn)入了活動場地。在看到活動場地的空間之前,我們無法制作展覽的內(nèi)容。因?yàn)槲覀儽仨氝\(yùn)行和測試性能,以確保它與節(jié)目的其余部分和我們客戶的要求相適應(yīng)。”
“Anomalyst的目標(biāo)是確保工作超出制作內(nèi)容的預(yù)期。”例如,Kee希望擁有虛擬資產(chǎn)來增加表演的氛圍和動作,因此他“找到了一位舞蹈演員同事,并預(yù)先錄制了一些舞蹈動作,作為環(huán)境中的附加資產(chǎn)。我認(rèn)為我們只能決定什么感覺是正確的,看看我們的工具集,看看我們可以建立什么,我們能夠與舞者一起度過難關(guān)。”雖然后勤工作對Anomalyst工作室來說是一個(gè)挑戰(zhàn),但Kee的團(tuán)隊(duì)使用的Xsens動捕套裝為他們提供了將混合現(xiàn)實(shí)性能帶入表演中的可靠性。
Xsens在實(shí)現(xiàn)虛擬世界實(shí)時(shí)運(yùn)動中的作用
Anomalyst團(tuán)隊(duì)的創(chuàng)意方向以及他們在活動規(guī)劃和執(zhí)行方面的經(jīng)驗(yàn)使該項(xiàng)目能夠順利進(jìn)行,但Kee強(qiáng)調(diào),他們選擇的技術(shù)對實(shí)現(xiàn)他們想象的動作非常重要。Movella的任務(wù)是為動作帶來意義,這與Kee團(tuán)隊(duì)想要呈現(xiàn)的效果是一致的;這項(xiàng)技術(shù)被用來創(chuàng)建模仿舞者自然流動的數(shù)字運(yùn)動:“Xsens以一種讓動作充滿生命力的方式進(jìn)行動作捕捉。”
Kee說到:“Xsens動捕套裝的特點(diǎn)是允許表演者在落地后跳離地面,而不會將腿夾在地面上。而且漂移現(xiàn)象幾乎沒有了。這套服裝可以傳達(dá)每個(gè)動作的力量和敏捷性。在測試了其他套裝后,我們需要一套更容易調(diào)試的套裝。我認(rèn)為Xsens給人的印象就是一種出色的動作捕捉解決方案,它更像是一種由內(nèi)向外的跟蹤,而不是像其他套裝那樣由外向內(nèi)的跟蹤。”
在全球電子競技比賽中,Xsens套裝是向觀眾展示混合現(xiàn)實(shí)表演關(guān)鍵的關(guān)鍵就是力量感。這場表演因其獨(dú)特的形式和吸引觀眾的能力而備受關(guān)注。對于Anomalyst來說,圍繞該活動產(chǎn)生的大量關(guān)注度已經(jīng)證實(shí)了混合現(xiàn)實(shí)表演的力量。
通過虛擬制作敘事的藝術(shù)
“我相信混合現(xiàn)實(shí)可以成為一種敘事的機(jī)制,我想很多傳統(tǒng)的節(jié)目導(dǎo)演和電影制作人現(xiàn)在都在關(guān)注這一點(diǎn)。”Kee說道。直播活動的數(shù)字化前景光明,但第一個(gè)成功的榜樣將是保持和激發(fā)行業(yè)興趣的關(guān)鍵
“我們能夠吸引新加坡國家廣播公司的注意力,他們對我們非常有興趣,他們想要了解我們?nèi)绾蝿?chuàng)造混合現(xiàn)實(shí)表演。”Kee說道