戀綜125 — 舞台視覺與 VJ
戀綜125 是一檔在女巫店舉辦的現場戀愛綜藝。我負責的部分包含舞台主視覺投影、VJ 即時視覺演出、互動影音裝置製作,以及整場演出的音樂節目流程整合。
主視覺投影
戀愛綜藝通常是粉紅色的、甜的、暖的,但現場的空間是女巫店——一個搖滾樂的 live house,牆是白的、粗的。
所以視覺上我讓插畫的色彩去撐甜度,投影本身維持在比較乾淨的狀態,不去搶空間本身的質感。
場景設計走了一個跟節目調性完全相反的路線——用高彩度的 2D 手繪插畫去建構一個不存在的甜美世界,然後把它投在一面搖滾樂的白牆上。這個衝突本身就是整個視覺的核心。
場景
三個主要場景,全部由 AI 生成動態素材(Dreamina),再透過 After Effects 做合成與動畫處理。
客廳是主要的談話場景,粉色沙發搭配綠色地毯,牆上掛著小幅插畫。整個空間刻意做得像兒童繪本的插圖——過度乾淨、過度甜美。
廚房和泳池是遊戲環節的場景。廚房走暖粉色調,泳池則是冷藍與粉紅的對比。
所有場景素材都由 Dreamina(AI 影像生成)產出靜態底圖,再用 After Effects 把插畫裡的元素拆開做微動態——窗外的雲在飄、燈在搖、水面在晃。
讓一張靜態插畫活起來,但不要太活,保持那種「幾乎是靜止的」呼吸感。
VJ 即時演出
VJ 的部分用 TouchDesigner 搭配 Resolume Arena 做即時運算,三個輸出通道分別對應不同的舞台元素。
Main — 主投影畫面
iPad — 小雕像投影控制
Monitor — Mediapipe 追蹤監看
每首歌都有獨立的 TouchDesigner 專案和預渲染影片,現場根據表演狀態即時切換和混合。歌單包含成癮、Does it call love、女賊、Stranger、飛翔等曲目。
身控樂器 — 互動影音裝置
這是整個專案裡技術含量最高的部分。讓歌手 Juju 透過手勢即時控制聲音與視覺,觀眾看到的是一個懸浮在透明壓克力上的 3D 小雕像跟著手動。
訊號流程:
Webcam → NDI → MediaPipe 手部骨架辨識 → TouchDesigner 訊號處理
分兩路輸出:
MIDI → Ableton Live(聲音合成)
NDI → Resolume Arena → 平板 + 45° 透明壓克力(Pepper's Ghost 3D 投影)
MediaPipe 輸出 21 個關節座標,TouchDesigner 解析後同時 mapping 到 MIDI 與視覺參數。所有 NDI 串流走同一個區域網路,以有線為主。
音樂流程整合
整場演出的音樂透過 Ableton Live 搭配 AbleSet 做 PGM 控制,讓音樂 cue 點跟視覺切換能夠同步。
12 首歌的工作帶全部在 Ableton 裡做好分軌,包含人聲、吉他、鼓、Bass 的獨立 stem,現場可以根據需要即時調整。
影片
現場
工具
Resolume Arena — 多通道投影輸出
After Effects — 場景動態合成
Ableton Live + AbleSet — 音樂 PGM 控制
MediaPipe — 手部骨架追蹤
Dreamina — AI 場景素材生成
NDI — 影像串流
團隊
Howie