《In Color Wave》는 2022년 7월 부산 금샘미술관에서 선보인 인터랙티브 미디어 설치 작품이다. 아티스트, 개발자 2인, 사운드 디자이너로 이루어진 4인 팀 Media XI가 수개월에 걸쳐 완성했다. 관객은 이 작품을 바라보는 데 그치지 않는다. 움직임과 존재 자체가 영상과 사운드를 실시간으로 바꾸며, 관객이 곧 작품의 일부가 된다.

작품의 바탕은 부산 금정구의 일상 풍경이다. 온천천, 지하철역, 거리에서 미리 촬영한 영상 클립은 단순한 배경이 아니라, 관객의 움직임에 따라 탐색되고 재조합되는 살아 있는 재료로 쓰였다. 스마트폰 SNS에서 키워드 하나로 무한한 가상 공간을 넘나들 듯, 그 미디어적 이동을 물리적 전시 공간에 옮겨 놓은 셈이다.

과정

기획부터 기술 구현, 현장 셋업까지 실험적 협업이 이어졌다. 팀은 여러 차례 미팅으로 방향을 다듬었고, 불필요한 요소는 과감히 덜어내 핵심 경험에 집중했다. 아티스트가 전체 콘셉트를 이끌고, 개발자들이 영상 처리와 실시간 반응 시스템을 맡았으며, 사운드 디자이너는 거리 노이즈와 디지털 음악, 몽환적인 보컬을 엮어 공간 전체를 소리로 감쌌다.

관객이 만드는 이미지와 소리

기술적으로 가장 공들인 지점은 관객의 행동을 실시간으로 영상·사운드에 연결하는 시스템이었다.

로비에서는 안면 인식과 실시간 카메라 캡처로 관객의 얼굴을 영상에 즉시 합성했다. 잡아낸 얼굴을 스틸 컷으로 변환해 기존 영상 위에 올리고, 블렌딩과 색보정, 모션 블러를 세밀히 조정해 자연스럽게 녹여 냈다. SNS에서 자신의 이미지가 무한히 복제·확장되는 감각을 은유한 장치였다.

실내에서는 피아노 건반이 입력 장치가 됐다. 건반을 누르면 사운드와 영상이 동시에 반응한다. 소리는 거리 소음·디지털 음악·보컬이 뒤섞이며 바뀌고, 영상은 색조가 물결치거나 텍스처가 부드럽게 왜곡되며 입자 효과로 번진다. 사운드는 노드 기반으로 설계해 MIDI 신호에 즉각 반응했고, 공간 오디오 튜닝으로 몰입감을 더했다.

전체 시스템은 영상 프로그램이 미리 준비한 클립에 실시간 이펙트를 입히고, 사운드 프로그램이 MIDI 입력을 받아 노이즈·음악·보컬을 믹싱·변조하는 구조였다. 카메라 트래킹, 피아노 MIDI 같은 관객 반응 데이터를 이펙트 모듈에 잇는 커스텀 코드를 직접 작성했다. 지연을 줄이는 최적화가 관건이었고, 기울어진 스크린은 관객이 화면을 내려다보게 해 입체감을 더했다. 디지털 기술을 쓰면서도 아날로그적이고 회화적인 질감을 잃지 않으려 했다.

미디어설치가 남기는 것

이 작품은 특정 메시지를 전하기보다, 관객이 영상 매체와 기술 속에서 자신을 어떻게 투영하고 사로잡히는지를 직접 겪게 하려 했다. 관객은 작품을 보는 동시에 작품 안으로 들어가 자신을 비춰 보며, 미디어가 우리가 세상을 보는 방식을 은연중에 정한다는 사실을 몸으로 감각한다.

동시에 첨단 기술을 누구나 누릴 수 있는 매체로 제안하고자 했다. 어려운 이론 없이도 기술과 놀이, 문화가 만나 새로운 시선을 열 수 있다는 가능성을, 지역의 일상 공간을 빌려 보여준 셈이다.

일반 관객에게 다소 난해했다는 아쉬움은 남는다. 그러나 무더운 여름 오후, 우연히 들른 젊은 아버지와 아이가 작품 속에 남긴 표정처럼 이 프로젝트는 저마다의 기억에 한 장면으로 남았다. 부산의 익숙한 풍경이 새로운 미디어 언어로 다시 태어나는 순간을, 함께 지켜본 경험이기도 하다.