在觀看今年科切拉音樂節(jié)的YouTube直播時，如果你所見到的一切讓你震驚，你絕不會是唯一一個有這種感覺的人。巨型鳳頭鸚鵡在舞臺上方展翅飛翔，金色的花朵在人群上空盤旋，F(xiàn)lume的焦點表演充滿了令人驚嘆的夢幻視覺效果，讓歌迷不禁問道：“這是真實的嗎？”

可答案是：不是。

科切拉音樂節(jié)的組織方與&Pull、Six Degrees of Freedom及All of it Now的音樂家們攜手，在他們的YouTube直播中融入了具有廣播節(jié)目質(zhì)量的增強現(xiàn)實（AR）效果，為想要在表演中添加實時3D視覺效果的音樂家們開創(chuàng)了新時代。但與其他表演不同，只有留在家中的人們才能享受到這些樂趣，將原本“不過是又一場可看的節(jié)目”變成了必看的電視直播。

為主舞臺制作鳳頭鸚鵡

對于長期關注科切拉音樂節(jié)的人來說，這可能算不上是驚喜。科切拉音樂節(jié)總是會為我們準備一些特殊活動。自從1999年以來，該音樂節(jié)就以創(chuàng)造獨特體驗而聞名，使人們津津樂道，像是讓杰出樂隊的成員重聚在一起；建造大型藝術裝置；讓圖帕克“重生”。但今年，科切拉音樂節(jié)的組織方想做一些不同的事情。

“我們的任務是在YouTube直播中創(chuàng)造印證AR概念的時刻，讓數(shù)百萬在家中觀看的人們感到特別而新鮮。”科切拉音樂節(jié)創(chuàng)新負責人Sam Schoonover說。

雖然現(xiàn)場表演得到了大部分關注，但科切拉音樂節(jié)幕后的無聲付出才是讓家庭觀眾觀看率上升的關鍵。這一次，在家觀看科切拉音樂節(jié)的人數(shù)要多于該音樂節(jié)的往屆參加者（確切地說，要多出幾百萬人），這實際上將音樂節(jié)分成了兩個陣營。對組織方來說，這也是一場獨特的挑戰(zhàn)。如何讓每個“版本”的科切拉音樂節(jié)都能創(chuàng)造出特別的感覺，并且，這是一場人們期望在其中看到大動作的活動，怎樣才能不負眾望？

Flume的團隊樂于進行嘗試。通過與傳奇藝術家Jonathan Zawada、Flume的創(chuàng)意團隊以及節(jié)目設計師John McGuire展開合作，科切拉方面以Flume之前的巡演視效和音樂視頻為基礎，將所有節(jié)日活力和氛圍融入到了AR設計中。

虛幻引擎在先進的內(nèi)容創(chuàng)作管線中扮演了基礎角色。首先，制作團隊會從Blender、Cinema 4D和3ds Max將動畫模型導入到引擎中，這使團隊能夠?qū)γ糠N視覺效果進行測試，并在演出前做出現(xiàn)場調(diào)整。然后，經(jīng)過審批的圖像會被轉(zhuǎn)化成精細的最終像素序列，借助運行著虛幻引擎的媒體服務器、StypeLand的合成插件以及三臺真實廣播攝像機提供的stYpe追蹤數(shù)據(jù)，這些序列會被實時合成到Flume的直播表演中。

“在虛幻引擎中使用著色器時，我們開發(fā)了一個3D對象遮蔽系統(tǒng)，幫助我們將3D模型擴展到真實世界的尺寸，并在幕后合成它們，”All of it Now的制作人Berto Mora說，“然后，我們創(chuàng)建了一個觸發(fā)器，這樣我們就可以根據(jù)樂隊的時間碼在虛幻引擎中自動切換圖像。”

意外驚喜和令人印象深刻的結果

結果令人印象深刻！當Flume在科切拉音樂節(jié)的主舞臺上表演著《Never Be Like You》、《Say Nothing》和《Tiny Cities》等歌曲時，他周圍華美而夢幻的視覺效果也讓觀眾大為贊嘆。除了演出中出現(xiàn)的巨型鳳頭鸚鵡和超現(xiàn)實花朵之外，還有引人注目的穿插效果，包括舞臺上彈起的變形甜甜圈和從地面升起的光譜城彩虹塔，它們在觀眾等待下一首歌曲時（對任何演唱會來說這都是最平淡的部分）出現(xiàn)，娛樂觀眾。

“我們還遇到了一些意外驚喜，”Six Degrees執(zhí)行制作人Juan Santillan回憶說，“例如，我們不知道Beck會與Flume一起登臺，然而，花朵圖案在畫面中完美地圍繞著他，就像專為他定做的一樣。”

同時，在舞臺上，所有視頻源首先會經(jīng)過現(xiàn)場色彩校正，然后進入節(jié)目的AR卡車，在那里，AR視覺效果會被合成到現(xiàn)場廣播源中。感謝虛幻引擎的DMX集成，合成效果非常逼真：團隊甚至可以將所有虛擬光照同步到舞臺上。合成之后，視頻源會被傳回到主要的廣播卡車中，F(xiàn)lume的節(jié)目導演可以從AR攝像機中現(xiàn)場剪輯出最終結果，這和他在傳統(tǒng)演出中所做的事情沒有區(qū)別。最終，他們得到了一場無縫銜接、時機完美的視覺體驗，讓歌迷沉浸在音樂之中。

“音樂節(jié)的體驗就是要讓自己完全沉浸于音樂和氛圍中，在這一刻沉醉，”科切拉音樂節(jié)現(xiàn)場AR制作人Eric Wagliardo補充說，“通過現(xiàn)場AR，我們將身處家中的歌迷帶到這個奇妙的地方，讓他們體驗Flume和Zawanda超現(xiàn)實的想象力。在這個地方，有300英尺高的鳳頭鸚鵡夢幻般地召喚著你，也有超現(xiàn)實的花朵在空中盤旋。”

演唱會視效的未來

除了為Flume建造布景外，科切拉音樂節(jié)的創(chuàng)新AR管線也開創(chuàng)了這樣一種未來：不僅能讓家中的歌迷看到增強現(xiàn)實的視覺效果，也可以讓現(xiàn)實世界的觀眾體驗到。“當鳥兒出現(xiàn)時，人們在直播中的參與度瘋狂飆升，”Schoonover回憶說，“他們不確定那是真實存在的還是CG。”

對他來說，這種參與度的上升代表著現(xiàn)場節(jié)目視效的一個轉(zhuǎn)折點：它為未來混合活動和元宇宙節(jié)日提供了模板。

“隨著在線觀眾的增多，數(shù)字活動所帶來的獨特體驗變得至關重要。但是，思考新技術如何影響現(xiàn)場的體驗也很重要。我們希望這個項目能夠引領新時代，通過AR眼鏡和虛擬世界讓歌迷體驗到一種全新的音樂維度。”他補充說。

“對我們來說，從2D到3D的過渡將和從單聲道到立體聲的轉(zhuǎn)變一樣具有革命性，虛幻引擎是實現(xiàn)這一過渡的關鍵。虛幻引擎創(chuàng)造了一個環(huán)境，讓我們可以從始至終地測試想法，迭代概念，并為科切拉音樂節(jié)的歌迷提供難忘的體驗，這也標志著新未來的開始。我們很期待來年能夠更進一步。”Wagliardo說。

延伸科切拉宇宙

雖然AR可能占據(jù)了主要地位，但科切拉音樂節(jié)的組織方并沒有止步于此，他們將實時技術的雄心延伸到了《堡壘之夜》，為身處家中的歌迷提供了另一種挖掘科切拉音樂節(jié)體驗的方式。受印地安人潮流啟發(fā)的服裝款式成為了《堡壘之夜》宇宙中的一部分，同時還提供了與音樂聯(lián)動的新配件，展現(xiàn)了音樂節(jié)的有趣審美。科切拉還通過官方的Icon Radio電臺接手了游戲內(nèi)的廣播，播放30多位科切拉音樂家的歌曲。科切拉宇宙誕生！