The IMPULS-2020 project DIGIREAL (BUas, 2021) aims to significantly strengthen BUAS’ Research and Development (R&D) on Digital Realities for the benefit of innovation in our sectoral industries. The project will furthermore help BUas to position itself in the emerging innovation ecosystems on Human Interaction, AI and Interactive Technologies. The pandemic has had a tremendous negative impact on BUas industrial sectors of research: Tourism, Leisure and Events, Hospitality and Facility, Built Environment and Logistics. Our partner industries are in great need of innovative responses to the crises. Data, AI combined with Interactive and Immersive Technologies (Games, VR/AR) can provide a partial solution, in line with the key-enabling technologies of the Smart Industry agenda. DIGIREAL builds upon our well-established expertise and capacity in entertainment and serious games and digital media (VR/AR). It furthermore strengthens our initial plans to venture into Data and Applied AI. Digital Realities offer great opportunities for sectoral industry research and innovation, such as experience measurement in Leisure and Hospitality, data-driven decision-making for (sustainable) tourism, geo-data simulations for Logistics and Digital Twins for Spatial Planning. Although BUas already has successful R&D projects in these areas, the synergy can and should significantly be improved. We propose a coherent one-year Impuls funded package to develop (in 2021): 1. A multi-year R&D program on Digital Realities, that leads to, 2. Strategic R&D proposals, in particular a SPRONG/sleuteltechnologie proposal; 3. Partnerships in the regional and national innovation ecosystem, in particular Mind Labs and Data Development Lab (DDL); 4. A shared Digital Realities Lab infrastructure, in particular hardware/software/peopleware for Augmented and Mixed Reality; 5. Leadership, support and operational capacity to achieve and support the above. The proposal presents a work program and management structure, with external partners in an advisory role.
In this project, the AGM R&D team developed and refined the use of a facial scanning rig. The rig is a physical device comprising multiple cameras and lighting that are mounted on scaffolding around a 'scanning volume'. This is an area at which objects are placed before being photographed from multiple angles. The object is typically a person's head, but it can be anything of this approximate size. Software compares the photographs to create a digital 3D recreation - this process is called photogrammetry. The 3D model is then processed by further pieces of software and eventually becomes a face that can be animated inside in Unreal Engine, which is a popular piece of game development software made by the company Epic. This project was funded by Epic's 'Megagrant' system, and the focus of the work is on streamlining and automating the processing pipeline, and on improving the quality of the resulting output. Additional work has been done on skin shaders (simulating the quality of real skin in a digital form) and the use of AI to re/create lifelike hair styles. The R&D work has produced significant savings in regards to the processing time and the quality of facial scans, has produced a system that has benefitted the educational offering of BUas, and has attracted collaborators from the commercial entertainment/simulation industries. This work complements and extends previous work done on the VIBE project, where the focus was on creating lifelike human avatars for the medical industry.
De creatieve industrie is een spil in innoverend Nederland en design speelt daarbinnen een cruciale rol. Het hbo heeft een belangrijke positie in deze drive voor innovatie. Door ontwerpend onderzoek te enten op de praktijk draagt het hbo actief bij aan kennis over het creatieve ontwerpproces. Het Network Applied Design Research (NADR) wordt een initiatieforgaan met voorbeeldfunctie en best practices van praktijkgericht en ontwerp gerelateerd onderzoek: koers uitzetten, initiatief nemen; visie neerzetten door organisatie van events en output (ondernemend en onderzoekend) die een zuigende werking heeft door te doen/organiseren zodat massa gecreëerd kan worden. Doelen van dit netwerk zijn onder meer: toegepast design onderzoek te emanciperen en de zichtbaarheid ervan te vergroten, kennis te ontwikkelen en de ontwikkelde kennis makkelijker en breder te delen, het stimuleren van de kwaliteit van praktijkgericht onderzoek in de ontwerpende disciplines, netwerkvorming, het opzetten van een body of knowledge & skills en kenniskaart, organisatieverband voor interactie met stakeholders, invloed op beleid en instrumenten. Het netwerk bevestigt de speciale positie die praktijkgericht, ontwerpend onderzoek heeft binnen het totale onderzoekskader. De verkenning in opdracht van SIA naar de positie van praktijkgericht onderzoek in de creatieve industrie onderschrijft dit. NADR vertegenwoordigt hbo-lectoren die vanuit hun lectoraat actief zijn op het gebied van design waarbij wetenschappelijke disciplines als Natural Sciences & Engineering, Humanities, Behavioral & Social Sciences en Arts in meer of mindere mate worden geïntegreerd om een bijdrage te leveren aan het reframen en oplossen van diverse maatschappelijke thema’s als bijvoorbeeld gezondheidszorg of circulaire economie. De verbindende factor is ontwerpen gerelateerd onderzoek en het platform is open voor lectoraten die zich daarmee verwant voelen, van zorg- technische- duurzame- virtuele product ontwerpers tot gameontwerpers, architecten of meer op toegepaste kunst gerichte lectoraten, zolang het ontwerpend onderzoek en integratie van verschillende disciplines bij hen centraal staat.
