在觀看今年科切拉音樂節(jié)的YouTube直播時,如果你所見到的一切讓你震驚,你絕不會是唯一一個有這種感覺的人。巨型鳳頭鸚鵡在舞臺上方展翅飛翔,金色的花朵在人群上空盤旋,F(xiàn)lume的焦點(diǎn)表演充滿了令人驚嘆的夢幻視覺效果,讓歌迷不禁問道:“這是真實(shí)的嗎?”
可答案是:不是。
科切拉音樂節(jié)的組織方與&Pull、Six Degrees of Freedom及All of it Now的音樂家們攜手,在他們的YouTube直播中融入了具有廣播節(jié)目質(zhì)量的增強(qiáng)現(xiàn)實(shí)(AR)效果,為想要在表演中添加實(shí)時3D視覺效果的音樂家們開創(chuàng)了新時代。但與其他表演不同,只有留在家中的人們才能享受到這些樂趣,將原本“不過是又一場可看的節(jié)目”變成了必看的電視直播。
為主舞臺制作鳳頭鸚鵡
對于長期關(guān)注科切拉音樂節(jié)的人來說,這可能算不上是驚喜。科切拉音樂節(jié)總是會為我們準(zhǔn)備一些特殊活動。自從1999年以來,該音樂節(jié)就以創(chuàng)造獨(dú)特體驗(yàn)而聞名,使人們津津樂道,像是讓杰出樂隊(duì)的成員重聚在一起;建造大型藝術(shù)裝置;讓圖帕克“重生”。但今年,科切拉音樂節(jié)的組織方想做一些不同的事情。
“我們的任務(wù)是在YouTube直播中創(chuàng)造印證AR概念的時刻,讓數(shù)百萬在家中觀看的人們感到特別而新鮮。”科切拉音樂節(jié)創(chuàng)新負(fù)責(zé)人Sam Schoonover說。
雖然現(xiàn)場表演得到了大部分關(guān)注,但科切拉音樂節(jié)幕后的無聲付出才是讓家庭觀眾觀看率上升的關(guān)鍵。這一次,在家觀看科切拉音樂節(jié)的人數(shù)要多于該音樂節(jié)的往屆參加者(確切地說,要多出幾百萬人),這實(shí)際上將音樂節(jié)分成了兩個陣營。對組織方來說,這也是一場獨(dú)特的挑戰(zhàn)。如何讓每個“版本”的科切拉音樂節(jié)都能創(chuàng)造出特別的感覺,并且,這是一場人們期望在其中看到大動作的活動,怎樣才能不負(fù)眾望?
Flume的團(tuán)隊(duì)樂于進(jìn)行嘗試。通過與傳奇藝術(shù)家Jonathan Zawada、Flume的創(chuàng)意團(tuán)隊(duì)以及節(jié)目設(shè)計師John McGuire展開合作,科切拉方面以Flume之前的巡演視效和音樂視頻為基礎(chǔ),將所有節(jié)日活力和氛圍融入到了AR設(shè)計中。
虛幻引擎在最先進(jìn)的內(nèi)容創(chuàng)作管線中扮演了基礎(chǔ)角色。首先,制作團(tuán)隊(duì)會從Blender、Cinema 4D和3ds Max將動畫模型導(dǎo)入到引擎中,這使團(tuán)隊(duì)能夠?qū)γ糠N視覺效果進(jìn)行測試,并在演出前做出現(xiàn)場調(diào)整。然后,經(jīng)過審批的圖像會被轉(zhuǎn)化成精細(xì)的最終像素序列,借助運(yùn)行著虛幻引擎的媒體服務(wù)器、StypeLand的合成插件以及三臺真實(shí)廣播攝像機(jī)提供的stYpe追蹤數(shù)據(jù),這些序列會被實(shí)時合成到Flume的直播表演中。
“在虛幻引擎中使用著色器時,我們開發(fā)了一個3D對象遮蔽系統(tǒng),幫助我們將3D模型擴(kuò)展到真實(shí)世界的尺寸,并在幕后合成它們,”All of it Now的制作人Berto Mora說,“然后,我們創(chuàng)建了一個觸發(fā)器,這樣我們就可以根據(jù)樂隊(duì)的時間碼在虛幻引擎中自動切換圖像。”
意外驚喜和令人印象深刻的結(jié)果
結(jié)果令人印象深刻!當(dāng)Flume在科切拉音樂節(jié)的主舞臺上表演著《Never Be Like You》、《Say Nothing》和《Tiny Cities》等歌曲時,他周圍華美而夢幻的視覺效果也讓觀眾大為贊嘆。除了演出中出現(xiàn)的巨型鳳頭鸚鵡和超現(xiàn)實(shí)花朵之外,還有引人注目的穿插效果,包括舞臺上彈起的變形甜甜圈和從地面升起的光譜城彩虹塔,它們在觀眾等待下一首歌曲時(對任何演唱會來說這都是最平淡的部分)出現(xiàn),娛樂觀眾。
“我們還遇到了一些意外驚喜,”Six Degrees執(zhí)行制作人Juan Santillan回憶說,“例如,我們不知道Beck會與Flume一起登臺,然而,花朵圖案在畫面中完美地圍繞著他,就像專為他定做的一樣。”
同時,在舞臺上,所有視頻源首先會經(jīng)過現(xiàn)場色彩校正,然后進(jìn)入節(jié)目的AR卡車,在那里,AR視覺效果會被合成到現(xiàn)場廣播源中。感謝虛幻引擎的DMX集成,合成效果非常逼真:團(tuán)隊(duì)甚至可以將所有虛擬光照同步到舞臺上。合成之后,視頻源會被傳回到主要的廣播卡車中,F(xiàn)lume的節(jié)目導(dǎo)演可以從AR攝像機(jī)中現(xiàn)場剪輯出最終結(jié)果,這和他在傳統(tǒng)演出中所做的事情沒有區(qū)別。最終,他們得到了一場無縫銜接、時機(jī)完美的視覺體驗(yàn),讓歌迷沉浸在音樂之中。
“音樂節(jié)的體驗(yàn)就是要讓自己完全沉浸于音樂和氛圍中,在這一刻沉醉,”科切拉音樂節(jié)現(xiàn)場AR制作人Eric Wagliardo補(bǔ)充說,“通過現(xiàn)場AR,我們將身處家中的歌迷帶到這個奇妙的地方,讓他們體驗(yàn)Flume和Zawanda超現(xiàn)實(shí)的想象力。在這個地方,有300英尺高的鳳頭鸚鵡夢幻般地召喚著你,也有超現(xiàn)實(shí)的花朵在空中盤旋。”
演唱會視效的未來
除了為Flume建造布景外,科切拉音樂節(jié)的創(chuàng)新AR管線也開創(chuàng)了這樣一種未來:不僅能讓家中的歌迷看到增強(qiáng)現(xiàn)實(shí)的視覺效果,也可以讓現(xiàn)實(shí)世界的觀眾體驗(yàn)到。“當(dāng)鳥兒出現(xiàn)時,人們在直播中的參與度瘋狂飆升,”Schoonover回憶說,“他們不確定那是真實(shí)存在的還是CG。”
對他來說,這種參與度的上升代表著現(xiàn)場節(jié)目視效的一個轉(zhuǎn)折點(diǎn):它為未來混合活動和元宇宙節(jié)日提供了模板。
“隨著在線觀眾的增多,數(shù)字活動所帶來的獨(dú)特體驗(yàn)變得至關(guān)重要。但是,思考新技術(shù)如何影響現(xiàn)場的體驗(yàn)也很重要。我們希望這個項(xiàng)目能夠引領(lǐng)新時代,通過AR眼鏡和虛擬世界讓歌迷體驗(yàn)到一種全新的音樂維度。”他補(bǔ)充說。
“對我們來說,從2D到3D的過渡將和從單聲道到立體聲的轉(zhuǎn)變一樣具有革命性,虛幻引擎是實(shí)現(xiàn)這一過渡的關(guān)鍵。虛幻引擎創(chuàng)造了一個環(huán)境,讓我們可以從始至終地測試想法,迭代概念,并為科切拉音樂節(jié)的歌迷提供難忘的體驗(yàn),這也標(biāo)志著新未來的開始。我們很期待來年能夠更進(jìn)一步。”Wagliardo說。
延伸科切拉宇宙
雖然AR可能占據(jù)了主要地位,但科切拉音樂節(jié)的組織方并沒有止步于此,他們將實(shí)時技術(shù)的雄心延伸到了《堡壘之夜》,為身處家中的歌迷提供了另一種挖掘科切拉音樂節(jié)體驗(yàn)的方式。受印地安人潮流啟發(fā)的服裝款式成為了《堡壘之夜》宇宙中的一部分,同時還提供了與音樂聯(lián)動的新配件,展現(xiàn)了音樂節(jié)的有趣審美。科切拉還通過官方的Icon Radio電臺接手了游戲內(nèi)的廣播,播放30多位科切拉音樂家的歌曲。科切拉宇宙誕生!