AR-maalaus (kokeilu)

Mitä tehtiin

Pääsimme hankkeessa suunnittelemaan yhdessä kuvataiteilija Minja Revonkorven kanssa, miten XR-teknologioita voisi hyödyntää osana hänen taideteoksiaan. Päädyimme kokeilemaan AR:n hyödyntämistä osana maalausta, tarkoituksena tuoda fyysiseen maalaukseen mukaan digitaalinen aspekti. Kokeilussa siis toteutettiin AR-sovellus, jossa digitaalinen teos ankkuroitiin kuvantunnistuksen avulla fyysiseen tauluun. Teoksen digitaalinen osa koostuu animaatiosta, jossa fyysisen maalauksen digitaalinen kaksonen valuu lattialle ja sen tilalle esiin tulee toinen kokonaan digitaalisesti luotu teos. AR-sovellus käynnistetään fyysisen maalauksen läheisyyteen asetettavasta QR-koodista, ja koska sovellus toteutettiin täysin web-teknologioita käyttäen, käyttäjän ei tarvitse ladata laitteelleen erillistä sovellusta AR-maalauksen kokemiseksi, vaan sovellus käynnistyy suoraan laitteen verkkoselaimeen. Sovelluksesta pyrittiin tekemään mahdollisimman saavutettava, ja valituilla teknologioilla saatiinkin toteutettua sovellus, jonka pitäisi toimia käytännössä millä tahansa laitteella, jossa on internet-yhteys, verkkoselain ja kamera.

Miten tehtiin

Aluksi kartoitettiin, millaisia vaihtoehtoja kyseisenlaisen sovelluksen tekemiseen on. Kokeilua varten valittiin MindAR- WebAR-kirjasto, koska se on ilmainen, siinä on kuvantunnistusominaisuus ja se mahdollistaa sovelluksen käynnistämisen suoraan web-selaimesta. Toinen MindAR:n valintaan vaikuttava syy oli se, että MindAR tarvitsee toimiakseen pääsyn vain laitteen kameraan, joten sovellusta voi käyttää käytännössä millä tahansa tietoteknisellä laitteella, jossa on kamera.

Kokeilun aluksi mietittiin yhdessä taiteilijan kanssa, millaista sisältöä tauluun halutaan laittaa ja testattiin, kuinka hyvin sovellus tunnistaa taiteilijan taulun ja ankkuroi digitaalisen sisällön tauluun. Sovellukseen tulevat digitaaliset sisällöt taiteilija tuotti itse, ja hankehenkilöstö vastasi sovelluksen teknisestä toteutuksesta. Lopputuloksena syntynyt web-sovellus sijoitettiin web-palvelimelle, josta se voidaan jakaa käyttäjille esimerkiksi näyttelyissä teoksen yhteyteen sijoitettavan QR-koodin avulla.

Mitä on hyvä ottaa huomioon

MindAR on WebAR-kirjasto, jonka avulla voi luoda kuvien ja kasvojen tunnistukseen perustuvia WebAR-sovelluksia. Pelkkä kirjasto itsessään ei tosin riitä sovelluksen tekemiseen, vaan sovelluksen tekeminen vaatii myös osaamista perinteisistä web-kehityksen teknologioista, kuten HTML:stä, CSS:stä ja Javascriptistä. Lisäksi sovellus tulee laittaa omalle web-palvelimelle, jotta sen voi jakaa käyttäjille. WebAR-sovellukset voivat sisältää muun muassa 3D-malleja, ääntä, tekstiä, kuvaa ja videoita, ja näiden sisältöjen luominen puolestaan vaatii kyseisten sisältöjen luomiseen käytettyjen sovellusten ja teknologioiden osaamista.

Mistä kokeilu löytyy

Sovellus on tarkoitettu koettavaksi osana alkuperäistä taideteosta, mutta sovellusta voi myös testata skannaamalla allaolevan QR-koodin älypuhelimella tai tabletilla ja osoittamalla alla olevaa teoksen kuvaa laitteen kameralla.