Hi! Mijn naam is Mario Paiano en ik ben een creatieve mediaspecialist met een passie voor nieuwe technologieën en hoe we daarmee het onderwijs kunnen verbeteren. De laatste jaren in het bijzonder augmented en virtual reality (XR). Ik heb meer dan twintig jaar ervaring met film, animatie en interactieve producties en heb gewerkt aan projecten in de sectoren onderwijs, gezondheid en commercie.
In dit portfolio tref je een aantal recente projecten aan binnen het thema XR.
Fontys XR event
Door mijn EdTech project rondom de kansen van een educatieve metaverse kwam ik in aanraking met veel XR affictionados binnen en buiten Fontys. Allemaal even enthousiast maar ook allemaal met dezelfde relevante vragen en uitdagingen. Daarom initieerde ik het XR Event. Enerzijds om de collega's aan elkaar te verbinden en anderzijds hoe we vanuit nieuwe samenwerkingen voor instellingsbrede oplossingen kunnen zorgen.
Op 12 mei organiseerden we namens Fontys ons eerste XR event. Met toffe keynotes van lector Bart Wernaard (over de morele kwesties) en Rens van der Vorst (Digitale Gremlins). Meer dan 165 collega's bezochten het event waarvan 30 met een eigen demo en 6 inspiratiesessies. Dit waren docenten, ondersteuners, lectoren en mensen van de diverse diensten zoals Onderwijs en Onderzoek en natuurlijk dienst IT.
XR @ Onderwijs
AR in de geschiedenis- en aardrijkskundelessen
Net als bij multimedia vind ik het heel belangrijk dat studenten kennis opdoen en geïnspireerd raken over de mogelijkheden van XR als onderwijsmateriaal. Geen dure developers maar gewoon zelf als docent/student ermee aan de slag. Dit project duurde 10 weken, ik ontwierp de lessen maar liet de studenten zoveel mogelijk zelf uitzoeken. De studenten van de Fontys Lerarenopleiding leverden 6 producties op die zo in hun eigen lessen te gebruiken waren.
AR en VR als analysemiddelen voor beweegexperts in opleiding
Studenten van de sportopleidingen (ALO, Sportkunde) leren over bewegen. Ze maakten hier in het verleden alleen gebruik van reallife situaties, 2d video's en foto's. Dit om analyses te schrijven en verbeterplannen op te stellen. In dit project bekeken we wat de impact zou zijn om zelf met motioncapture pakken bewegingen te filmen. Studenten kregen daarbij als output een VR en AR toepassing om bewegingen te analyseren in 3d.
VR als prototyping tijdens de lessen over gespreksvaardigheden
Er zijn tal van tools rondom gespreksvaardigheden met VR beschikbaar. Veelal door een bedrijf of docent voorbereid en waarbij de student alleen door het gesprek heen gaat. Dit studiejaar ga ik echter, gedurende blokken van 8 weken, aan de slag met de tweedejaars van de opleidingen Pedagogiek en Sportkunde. Studenten gaan zelf hun gesprekken ontwerpen, prototypen, evalueren, aanpassen, ontwerpen, etc...en allemaal in VR. Het lectoraat Mens & Techniek zit er als onderzoekpartner aan gekoppeld om het effect te meten voor het onderwijs.
AR en AI voor het filmen en weergeven van lesscenarios
Vanaf begin studiejaar 2023-2024 ga ik aan de slag met een AI welke het mogelijk maakt om met diverse camera's mensen te filmen. Dit kunnen meerdere mensen in één shot zijn. De AI verwerkt alle beelden naar 3d content (Mocap data) en het doel is dat studenten deze scene's in AR kunnen terugkijken. Dit project doe ik samen met een externe partner.
XR & Meetings
Virtuele campus voor proefstuderen
Midden in de Coronacrisis toch een beeld krijgen van de opleiding waar je je voor wilt aanmelden? Ik ontwierp de belangrijkste ruimtes van ons gebouw. Deze hebben we ingezet voor online voorlichting waarbij docenten, ondersteuners en leerlingen gezamenlijk aanwezig waren. In de formelere setting maar ook voor informele momenten, in de kantine bijvoorbeeld. Heel leuke reacties gehad! Ook van de makers.
Microsoft Mesh & Avatars
November 2021 kondigde Microsoft hun avatars aan. Inmiddels is het veel meer dan dat maar in Nederland hebben we er nog maar weinig van mogen proeven. Eind augustus hoor ik of ik ben toegelaten tot de Microsoft Innovators for Education pool. Vanaf dan kan ik via het Microsoft Preview programma nog beter ervaren wat er op ons af komt. #Excited
Marketing XR
Er zijn natuurlijk tal van toepassingen te bedenken maar je moet ergens beginnen. Zelf creëerden we een serie met AR-video boodschappen van onze eigen studenten die we meegeven aan leerlingen tijdens de open dagen. Inmiddels al voor 6 opleidingen. Fraai vormgegeven in onze huisstijl.
Ook voor ons werkveld enkele toepassingen die specifiek gemaakt zijn in opdracht van twee verschillende lectoraten waarbij de mooiste van de twee ongetwijfeld de 'lectorale-rede-in-het-klein' (AR) toepassing is.
Creative Day
Creativiteit is broodnodig om te kunnen innoveren. Binnen Fontys was er weinig aandacht voor creativiteit vanuit de medewerker. Daarom initieerde ik drie jaar geleden de Fontys Creative Day. Met toffe keynotes over het creativiteitsproces maar vooral met hands-on toepassingen en workshops rondom creatieve tools en werkwijzen.
Bij de tweede editie van dit event nodigde ik Sven de Grootte van Adobe uit om te presenteren over de diverse tools rondom 3d creatie (Adobe Substance en Aero). Komend jaar staat in het teken van AI in combinatie met XR en hoe we die thema's als creativelingen kunnen omarmen.
Ook waardevol
Naast alle XR projecten ben ik ook regelmatig bezig met andere innovaties zoals in de volgende twee projecten.
Faceblur
Bedacht en geïnitieerd. Een AI app waarmee leerlingen en docenten hun les kunnen filmen en heel eenvoudig de gewenste mensen kunnen blurren waardoor de video's in te zetten zijn voor onderwijs. Dit keer dus met AVG hoog in het vaandel.
Posture Play
Een studentenproject door studenten ICT voor studenten Sport & Bewegen. Leren doormiddel van spelen. Met deze app kunnen studenten spelenderwijs leren over hoe bewegen werkt. De studenten van ICT leverden dit project als betaversie op. Volgend jaar gaat een volgende groep verder.
Ik hoop dat je een beetje een beeld hebt gekregen over de projecten waar ik me op het gebied van XR mee bezighoud. Uiteraard gebeurd er ook veel achter de schermen zoals het geschikt maken van ons netwerk, single sign on voor VR en AR devices, inkoop, beheer en de mogelijkheden van het gebruik van 3d avatars voor onderwijsdoeleinden, maar dat is uiteraard moeilijk in beeld te brengen.
Wil je nog eens doorpraten over dit thema? Neem dan contact op!
Groetjes, Mario
Credits:
Mario Paiano en Adobe Stock