Het in de VS gevestigde designlab Amplifier gebruikt kunst om de boodschap van zijn partners op het gebied van sociale verandering te ‘versterken’. Nu, met augmented reality, verenigt het de werelden van traditioneel drukwerk en slimme technologie.

Er zijn allerlei interessante manieren om afdrukken te laten ‘bewegen’. We hebben bijvoorbeeld gekeken naar de fantastische effecten die je kunt bereiken met lenticulair afdrukken.

Maar moderne technologie, en vooral de mogelijkheden van augmented reality (AR) die smartphones bieden, kunnen een poort zijn naar een hele nieuwe wereld van bewegende kunstwerken.

Voor het non-profit design lab Amplifier biedt deze technologie ongelooflijke mogelijkheden. Amplifier is gespecialiseerd in het helpen om “de boodschappen van sociale bewegingen in de mainstream cultuur te brengen om grootschalige cultuurverschuivingen te creëren” en door het uitbrengen van zijn eigen AR-app is het nu in staat om zijn traditionele analoge posters, stickers en muurschilderingen te transformeren in kunst die letterlijk tot leven komt om een oproep tot actie te doen.

“Als organisatie gebruiken we augmented reality als een tool om meer diepte in de storytelling te brengen,” vertelde Amplifier’s Co-Creative Director Cleo Barnett ons.

“Veel van ons werk bestaat uit het vereenvoudigen van kernboodschappen van bewegingen om ze superduidelijk en overtuigend te maken voor ons publiek – we willen dat iemand de kernboodschappen van zijn kunstwerk in één seconde begrijpt, bijvoorbeeld als hij door de straat rijdt en het kunstwerk als een billboard ziet.

“AR is voor ons een manier om de verhalen die we vertellen meer diepgang te geven, zodat onze gemeenschappen rechtstreeks van de leiders van de beweging kunnen horen en dieper betrokken kunnen raken bij het kunstwerk door middel van meer genuanceerde verhalen.

“We willen dat ons kunstwerk in een openbare ruimte leeft, zodat het deel kan worden van het algemene bewustzijn, maar ook zodat het een conversatiestarter wordt voor meer leden van de gemeenschap. Dus als iemand op straat langsloopt en ziet dat iemand anders het kunstwerk activeert, creëert dat ineens een nieuw punt van contact tussen mensen. Dit is een groeiend doel van onze organisatie geworden – het opbouwen van een dialoog tussen mensen, niet alleen om kritische denkvaardigheden te vergroten, maar ook om compassie op te bouwen en hopelijk duidelijke wegen voor actie te inspireren.”

Traditie en technologie

Het lanceringsvoorbeeld van deze bijna magische technologie maakt gebruik van een portret van inheems bewegingsleider Xiuhtezcatl Martinez door kunstenaar Shepard Fairey. Door simpelweg de Amplifier app te gebruiken om het stilstaande beeld van Xiuhtezcatl te bekijken, komt hij tot leven om te praten over het werk dat nodig is in de strijd voor klimaatactie (om dit en de Amplifier app in actie te zien, bezoek hier).

Inheemse bewegingsleider Xiuhtezcatl Martinez door kunstenaar Shepard Fairey

“De manier waarop de technologie werkt is dat het 2D kunstwerk geprogrammeerd is in de app, die we zelf hebben gebouwd en ontworpen voor onze organisatie. Wanneer de app het kunstwerk herkent, wordt de AR geactiveerd. Soms werken we via derden, in dat geval kan ons publiek een QR-code scannen en komen ze op een webpagina terecht, waarna de webpagina het kunstwerk kan scannen en lezen. Maar die eerste afbeelding moet in het systeem worden geprogrammeerd om de AR te activeren,” zei Cleo.

“Hoe elk geanimeerd kunstwerk wordt gemaakt, hangt af van de behoeften van de campagne die we aan het bouwen zijn, samen met de tijdlijn en de middelen waarmee we werken. Voor dit kunstwerk met Xiuhtezcatl hebben we een vrij zeldzame technologie gebruikt die Rotoscoping heet. We namen onze stilstaande foto van Xiuhtezcatl op het exacte punt waarop we onze video van zijn toespraak begonnen. Vervolgens gaven we de foto aan Shephard Fairey om het originele kunstwerk te maken. En toen het kunstwerk af was, gaven we dat digitale bestand, inclusief de gelaagde bestanden van dat kunstwerk plus de video- en audiobeelden van de toespraak, aan het Rotoscoping-team.

“Het Rotoscoping-team tekent met de hand wat nodig is. Maar de technologie werkt zo dat ze alleen binnen bepaalde punten met de hand hoeven te tekenen en dat de Rotoscoping-technologie de lege plekken invult. Het is een heen-en-weer proces, vergelijkbaar met het werken met AI: je tekent met de hand, je laat de machine de lege plekken invullen, maar vervolgens corrigeer je bepaalde gebieden die er niet goed uitzien.

“Het is dus behoorlijk tijd- en middelenintensief – er zijn niet veel mensen in de wereld die dit doen, en het is niet wat we doen voor elk stuk AR, maar het is echt een prachtig voorbeeld van wat we kunnen doen. Iets anders wat we kunnen doen is zo simpel als een gelaagd bestand krijgen van een kunstenaar en samenwerken met een animator om het kunstwerk te animeren.”

De kracht van kunst en technologie

Omdat de app de eerste afbeelding moet herkennen en omdat Amplifier zo’n enorme catalogus aan visuele beelden heeft, zijn er bepaalde praktische vereisten die moeten worden aangepakt.

“De technologie is nog nieuw, dus er zijn zeker uitdagingen. Een daarvan is opslagruimte en geheugen. We hebben nu een enorm portfolio van AR-geactiveerde kunstwerken, dus het is een uitdaging om onze app effectief te laten werken met alle opslagruimte die nodig is om al deze verschillende kunstwerken te lezen, en dat is een continu proces tussen ons en onze webontwikkelaars,” zei Cleo.

En kunnen deze AR-kunstwerken direct worden geïntegreerd in de camera van een iPhone, zodat iemand die een poster mooi vindt een foto kan maken en het kunstwerk automatisch tot leven komt? “Ja,” zegt Cleo. “We kunnen al direct integreren met de iPhone via de Spark AR-filter op Instagram. We gebruiken ook een platform genaamd 8th Wall waarmee mensen het kunstwerk kunnen activeren via een URL, dus het is niet nodig om de app te downloaden.”

“Het eindresultaat is erg boeiend. Onze partners zijn echt enthousiast om campagnes te bouwen met deze technologie en het publiek vindt het geweldig om op deze manier met het werk bezig te zijn. We hebben in het verleden een aantal enorm succesvolle campagnes gehad die niet gebaseerd waren op AR, maar ik zou zeggen dat dit een evolutie is van ons werk en we hebben ons altijd gericht op innovatie in storytelling als een belangrijke waarde van onze organisatie.”

Wat is de acceptatie van de technologie in de echte wereld? Amplifier’s Earth Guardians AR-geactiveerde kunstwerk heeft tienduizenden impressies geoogst op verschillende platforms.

En voor print is een van de fantastische aspecten van deze technologie – afgezien van het prachtige originele artwork dat Amplifier gebruikt om de activering te stimuleren – het feit dat het traditioneel gedrukte afbeeldingen zijn die fungeren als de poort naar de AR-wereld.

“Hoewel er altijd digitale aspecten aan onze campagnes zitten – inclusief gratis open-source hoge resolutie downloads van ons artwork op amplifier.org, zodat mensen overal ter wereld dit artwork kunnen uitprinten – zit er ook altijd een analoog aspect aan onze campagnes. We blijven geloven in de kracht van print,” zei Cleo.

“Wat mensen wel of niet zien in hun openbare ruimte is belangrijk. Als je iets eenmaal ziet, kun je het nooit meer ongedaan maken, het wordt onderdeel van je onbewuste. Daarom denken we dat print een veel langer blijvende indruk kan maken dan een digitale scroll. Natuurlijk is digital storytelling ook belangrijk voor ons, dus waar die twee samengaan, dat is echt onze sweet spot.”