{"id":222943,"date":"2020-05-12T15:23:26","date_gmt":"2020-05-12T13:23:26","guid":{"rendered":"https:\/\/innovationorigins.com\/?p=222943"},"modified":"2020-05-12T15:23:26","modified_gmt":"2020-05-12T13:23:26","slug":"nieuwe-techniek-voor-volumetrische-videos-maakt-vr-veel-echter","status":"publish","type":"post","link":"https:\/\/ioplus.nl\/archive\/nl\/nieuwe-techniek-voor-volumetrische-videos-maakt-vr-veel-echter\/","title":{"rendered":"Nieuwe techniek voor volumetrische video’s maakt VR veel echter"},"content":{"rendered":"

Augmented reality (AR) en virtual reality (VR) wordt steeds levensechter. Onlangs nog is een computerwetenschapper van de Universiteit van Saarbr\u00fccken erin geslaagd om virtuele beelden fysiek “tastbaar” te maken (zie IO-artikel hierover<\/a>). Onderzoekers van de afdeling Vision and Imaging Technologies (VIT) van het Fraunhofer Heinrich Hertz Instituut HHI<\/a> ontwikkelen nu nieuwe methoden om echte interactie met virtuele personages mogelijk te maken. Dat gebeurt met behulp van innovatieve volumetrische video’s.<\/p>\n

Op dit moment zijn er slechts enkele studio’s in Europa die zich met deze technieken bezig houden. Een ervan is het in Eindhoven gevestigde bedrijf 4DRStudios\u00a0<\/a>.<\/p>\n

Augmented en virtual reality zijn ondenkbaar zonder volumetrische video. Dit komt omdat alleen deze methode een hoogwaardige “free-viewpoint rendering” van dynamische sc\u00e8nes mogelijk maakt. Rendering is het op basis van data met behulp van een computer beelden produceren. Tot nu toe ging het echter steeds om vooraf opgenomen scenes en beelden. Individuele interactie met de virtuele karakters was daarom niet mogelijk. “Om interactie mogelijk te maken worden meestal klassieke grafische computermodellen gebruikt. Maar deze bereiken niet hetzelfde niveau van realisme”, aldus de onderzoekers in een persbericht.<\/p>\n

Dr. Anna Hilsmann, hoofd van de onderzoeksgroep Computer Vision en Graphics van de afdeling VIT, en haar collega’s hebben nu een methode gevonden om gegevens uit de echte wereld te te integreren in de virtuele wereld. Het proces wordt toegepast binnen het door de EU<\/a> gefinancierde project “Innovative Volumetric Capture and Editing Tools for Ubiquitous Storytelling” (INVICTUS).<\/p>\n

 <\/p>\n

\"\"
\u00a9 Fraunhofer HHI<\/figcaption><\/figure>\n

Levensechte VR-gezichten vormen een uitdaging<\/h3>\n

De belangrijkste kenmerken zijn “de toevoeging van semantiek en animatie-eigenschappen aan de vastgelegde gegevens en het gebruik van hybride geometrie- en video-gebaseerde animatiemethoden die directe animatie mogelijk maken”. Daarnaast is er ook een betrouwbare aanpak voor het verwerken van lichaamsbewegingen en gezichtsuitdrukkingen.<\/p>\n

Vooral het weergeven van die gezichtsuitdrukkingen zijn een groot probleem voor de makers van Augmented en Virtual Reality. Hilsmann en haar collega’s stellen daarom een drietrapsoplossing voor in hun publicatie over hun methode in het speciale nummer “Computer Vision for the Creative Industry”. Allereerst wordt gebruik gemaakt van geometrie om kenmerken met een lage resolutie te modelleren, zoals grove motorieke bewegingen. Dan volgt de overlapping van op video gebaseerde texturen om subtiele bewegingen en fijne gelaatskenmerken vast te leggen. Als laatste worden dan subtiele details aangebracht, zoals de blik van de ogen; iets wat tot dusver eigenlijk altijd verwaarloosd werd.<\/p>\n

In het INVICTUS project zullen zowel het uiterlijk als de beweging van acteurs worden vastgelegd met behulp van state-of-the-art volumetrische motion capture technologie\u00ebn. Daarmee kunnen dan volumetrische avatars worden gegenereerd.<\/p>\n

Aan het einde van het project, dat sinds maart 2020 twee jaar loopt, zullen er volgens de onderzoekers onder andere drie innovatieve auteurshulpmiddelen beschikbaar zijn:<\/p>\n