미국에 본사를 둔 디자인 연구소 Amplifier는 예술을 활용해 사회 변화 파트너의 메시지를 ‘증폭’합니다. 이제 증강 현실을 통해 전통적인 인쇄물과 스마트 기술의 세계를 결합하고 있습니다.
인쇄물을 ‘움직이는’ 것처럼 보이게 할 수 있는 흥미로운 방법에는 여러 가지가 있습니다. 예를 들어 렌티큘러 인쇄로 얻을 수 있는 환상적인 효과에 대해 살펴봤습니다.
하지만 현대 기술, 특히 스마트폰에서 제공하는 증강 현실(AR)의 잠재력은 움직이는 예술 작품의 완전히 새로운 세계로 가는 관문을 제공할 수 있습니다.
비영리 디자인 연구소인 Amplifier에게 이 기술은 놀라운 기회를 제공합니다. “사회 운동의 메시지를 주류 문화에 도입하여 대규모 문화 변화를 일으키는 것”을 전문으로 하는 Amplifier는 자체 AR 앱 출시를 통해 기존의 아날로그 포스터, 스티커, 벽화를 말 그대로 살아 움직이는 예술로 변환하여 행동 촉구를 전달할 수 있게 되었습니다.
앰플리파이어의 공동 크리에이티브 디렉터 클레오 바넷은 “저희는 증강 현실을 스토리텔링에 깊이를 더하는 도구로 활용하고 있습니다.”라고 말합니다.
“저희의 많은 작업은 움직임의 핵심 메시지를 단순화하여 관객에게 매우 명확하고 설득력 있게 전달하는 것입니다. 예를 들어, 길을 가다가 광고판으로 작품을 본다면 1초 만에 작품의 핵심 메시지를 이해할 수 있도록 하려는 것입니다.
“AR은 우리가 전하는 이야기에 깊이를 더할 수 있는 방법으로, 커뮤니티가 운동 리더의 이야기를 직접 듣고 보다 미묘한 스토리텔링을 통해 작품에 더 깊이 참여할 수 있게 해줍니다.
“저희는 예술 작품이 공공장소에 전시되어 주류 의식의 일부가 될 수 있을 뿐만 아니라 더 많은 커뮤니티 구성원들이 대화를 시작하는 계기가 되기를 바랍니다. 따라서 누군가 길을 지나가다가 다른 사람이 작품을 작동시키는 것을 보게 되면 갑자기 사람들 사이에 또 다른 참여 포인트가 생깁니다. 이는 비판적 사고 능력을 향상시킬 뿐만 아니라 연민을 키우고 행동에 대한 명확한 길을 제시하는 등 사람들 간의 대화를 구축하는 우리 조직의 목표가 되었습니다.”
전통과 기술
이 마법에 가까운 기술의 출시 사례는 아티스트 셰퍼드 페어리가 그린 원주민 운동 지도자 시우테즈카틀 마르티네즈의 초상화를 사용합니다. Amplifier 앱을 사용하여 시우테즈카틀의 정지 이미지를 보기만 하면 그가 살아 움직이며 기후 행동을 위한 투쟁에 필요한 일에 대해 이야기합니다(이 이미지와 Amplifier 앱이 작동하는 모습을 보려면 여기를 방문하세요).
아티스트 셰퍼드 페어리의 원주민 운동 지도자 시우테즈카틀 마르티네스
“이 기술의 작동 방식은 2D 아트워크를 앱에 프로그래밍하는 방식으로, 우리 조직을 위해 직접 제작하고 디자인했습니다. 앱이 아트워크를 인식하면 AR이 활성화됩니다. 때로는 타사를 통해 작업하기도 하는데, 이 경우 관객이 QR 코드를 스캔하면 웹페이지로 이동하고 웹페이지에서 아트워크를 스캔하여 읽을 수 있습니다. 하지만 AR을 활성화하려면 초기 이미지를 시스템에 프로그래밍해야 합니다.”라고 클레오는 말합니다.
“각 애니메이션 아트워크의 제작 방식은 제작 중인 캠페인의 요구 사항과 타임라인 및 리소스 범위에 따라 다릅니다. 시우테즈카틀과 함께한 이번 작품에서는 로토스코핑이라는 상당히 희귀한 기술을 사용했습니다. 우리는 시우테즈카틀의 연설 영상이 시작되는 바로 그 지점에서 시우테즈카틀의 스틸 사진을 찍었습니다. 그런 다음 이 스틸 사진을 셰퍼드 페어리에게 전달하여 원본 아트워크를 만들도록 했습니다. 그리고 아트워크가 완성되면 해당 아트워크의 레이어 파일과 연설의 비디오 및 오디오 영상을 포함한 디지털 파일을 로토스코핑 팀에 제공했습니다.
“로토스코핑 팀은 필요한 부분을 수작업으로 그립니다. 하지만 이 기술의 작동 방식은 특정 지점 내에서만 손으로 그리면 로토스코핑 기술이 빈칸을 채우는 방식입니다. AI로 작업할 때와 비슷하게 사람이 직접 그림을 그리고 기계가 빈칸을 채우도록 한 다음 올바르지 않은 부분을 수정하는 등 앞뒤로 반복되는 과정입니다.
“이 작업을 하는 사람은 전 세계적으로 많지 않고, 모든 AR 작품에 이 작업을 하는 것은 아니지만, 시간과 리소스가 많이 소요되는 작업이지만 우리가 할 수 있는 일을 보여주는 정말 아름다운 예입니다. 아티스트에게 레이어 파일을 받아 애니메이터와 협력하여 아트웍에 애니메이션을 적용하는 것처럼 간단한 작업도 할 수 있습니다.”
예술과 기술의 힘
앱이 초기 이미지를 인식해야 하고 Amplifier에는 방대한 시각적 이미지 카탈로그가 있기 때문에 해결해야 할 몇 가지 실질적인 요구 사항이 있습니다.
“이 기술은 아직 새로운 기술이기 때문에 해결해야 할 과제가 분명히 있습니다. 그중 하나가 저장 공간과 메모리입니다. 현재 AR로 활성화된 방대한 아트웍 포트폴리오를 보유하고 있기 때문에 이 다양한 아트웍을 모두 읽어들이는 데 필요한 모든 저장 공간에서 앱이 효과적으로 작동하도록 유지하는 것은 어려운 과제였으며, 이는 우리와 웹 개발자들 사이에 계속 진행 중인 프로세스입니다.”라고 클레오는 말합니다.
그렇다면 이러한 AR 아트워크를 iPhone 카메라에 직접 통합하여 누군가가 포스터가 마음에 들면 사진을 찍으면 자동으로 아트워크가 살아 움직일 수 있을까요? 클레오는 “네.”라고 말합니다. “이미 Instagram의 Spark AR 필터를 통해 iPhone과 직접 통합할 수 있습니다. 또한 사람들이 URL을 통해 작품을 활성화할 수 있는 8th Wall이라는 플랫폼을 사용하므로 앱을 다운로드할 필요가 없습니다.”
“최종 결과물은 매우 매력적입니다. 파트너들은 이 기술을 사용하여 캠페인을 제작하는 것에 매우 흥분하고 있으며, 시청자들도 이러한 방식으로 작품에 참여하는 것을 좋아합니다. 과거에도 AR을 기반으로 하지 않은 캠페인이 큰 성공을 거둔 적이 있지만, 이는 우리 작업의 진화라고 할 수 있으며 우리는 항상 조직의 핵심 가치로 스토리텔링 혁신에 집중해 왔습니다.”
그렇다면 현실 세계에서 이 기술은 어떻게 활용되고 있을까요? 앰플리파이어의 어스 가디언즈 AR 활성화 아트워크는 다양한 플랫폼에서 수만 건의 노출 수를 기록했습니다.
그리고 인쇄의 경우, 이 기술의 환상적인 측면 중 하나는 – 증폭기가 활성화를 촉발하는 데 사용하는 아름다운 원본 아트워크는 차치하더라도 – AR 세계로 가는 관문 역할을 하는 것이 전통적으로 인쇄된 이미지라는 사실입니다.
“전 세계 어디에서나 아트워크를 인쇄할 수 있도록 amplifier.org에서 고해상도 오픈소스를 무료로 다운로드하는 등 디지털적인 측면도 있지만, 캠페인에는 항상 아날로그적인 측면도 있습니다. 우리는 인쇄물의 힘에 대한 믿음을 고수하고 있습니다.”라고 클레오는 말합니다.
“사람들이 공공장소에서 무엇을 보거나 보지 않는지는 중요합니다. 한 번 본 것은 절대 지울 수 없고 무의식의 일부가 되니까요. 그렇기 때문에 인쇄물이 디지털 스크롤보다 훨씬 더 오래 지속되는 인상을 남길 수 있다고 생각합니다. 물론 디지털 스토리텔링도 중요하기 때문에 이 두 가지를 결합하는 것이 바로 우리의 강점입니다.”