{"id":222914,"date":"2020-05-12T11:54:50","date_gmt":"2020-05-12T09:54:50","guid":{"rendered":"https:\/\/innovationorigins.com\/?p=222914"},"modified":"2020-05-12T11:54:50","modified_gmt":"2020-05-12T09:54:50","slug":"neue-verfahren-fuer-produktion-und-animation-volumetrischer-videos","status":"publish","type":"post","link":"https:\/\/ioplus.nl\/archive\/de\/neue-verfahren-fuer-produktion-und-animation-volumetrischer-videos\/","title":{"rendered":"Neue Verfahren f\u00fcr Produktion und Animation volumetrischer Videos"},"content":{"rendered":"

Die Fortschritte in Bereich der Augmented und Virtual Reality erlauben den Nutzern immer realistischere Erfahrungen. Gerade erst ist es einem Informatiker der Universit\u00e4t Saarbr\u00fccken gelungen, virtuelle Welten physisch \u201eertastbar\u201c zu machen (IO berichtete<\/a>). Nun sind Forscher der Abteilung Vision and Imaging Technologies (VIT) am Fraunhofer Heinrich-Hertz-Institut HHI<\/a> dabei, neue Verfahren zu entwickeln, mit denen eine echte Interaktion mit virtuellen Charakteren erm\u00f6glicht werden soll \u2013 mit Hilfe innovativer volumetrischer Videos.<\/p>\n

Augmented und Virtual Reality sind ohne volumetrisches Video nicht denkbar. Dieses Verfahren erm\u00f6glicht n\u00e4mlich erst ein qualitativ hochwertiges \u201efree-viewpoint rendering\u201c von dynamischen Szenen. Bisher beschr\u00e4nkten sich diese Szenen jedoch auf vorab aufgezeichnete Situationen. Eine individuelle Interaktion mit den virtuellen Charakteren war also nicht m\u00f6glich. \u201eUm Interaktion zu erm\u00f6glichen, werden \u00fcblicherweise klassische Computergrafikmodelle eingesetzt, die allerdings nicht die gleiche Realit\u00e4tsn\u00e4he erreichen\u201c, hei\u00dft es in der Mitteilung des Fraunhofer HHI.<\/p>\n

Dr. Anna Hilsmann, die Leiterin der Forschungsgruppe Computer Vision und Grafik in der Abteilung VIT, und ihre Kollegen haben nun offenbar eine Methode gefunden, Daten aus der realen Welt soweit inklusive ihrer rein nat\u00fcrlichen Verformungen und Eigenschaften zu nutzen. Sie pr\u00e4sentieren diese Methode vor Kurzem in einer neuen Publikation sowie der Initiierung des, von der EU<\/a> gef\u00f6rderten Projekts \u201eInnovative Volumetric Capture and Editing Tools for Ubiquitous Storytelling\u201c (INVICTUS).<\/p>\n

\"\"
\u00a9 Fraunhofer HHI<\/figcaption><\/figure>\n

Gesichter als Herausforderung<\/h3>\n

Die Hauptmerkmale der vorgestellten Pipeline seien \u201edie Erg\u00e4nzung der erfassten Daten durch Semantik und Animationseigenschaften sowie die Nutzung von hybriden geometrie- und videobasierten Animationsmethoden, welche eine direkte Animation erm\u00f6glichen\u201c. Dar\u00fcber hinaus gebe es auch einen zuverl\u00e4ssigen Ansatz f\u00fcr die Verarbeitung von K\u00f6rper- und Gesichtsbewegungen.<\/p>\n

Insbesondere Gesichter mit deren Mimik stellen f\u00fcr die Macher von Augmented und Virtual Reality traditionell eine Herausforderung dar. Hilsmann und ihre Kollegen schlagen in ihrer Publikation in der Sonderausgabe zum Thema \u201eComputer Vision for the Creative Industry\u201c deshalb eine dreistufige L\u00f6sung vor: Erstens, mit Hilfe von Geometrie, die Modellierung von Merkmalen mit geringer Aufl\u00f6sung \u2013 wie z. B. grobe Bewegungen. Zweitens die \u00dcberlagerung von videobasierten Texturen, um subtile Bewegungen und feine Merkmale zu erfassen. Und drittens \u2013 unter Verwendung eines Autoencoder-basierten Ansatzes \u2013 die Synthese von traditionell vernachl\u00e4ssigten Merkmalen wie zum Beispiel Augen.<\/p>\n

Im Rahmen des INVICTUS-Projekts werden dazu erst mit modernsten volumetrischen Bewegungserfassungstechnologien sowohl das Aussehen als auch die Bewegung von Schauspielern erfasst. Dann werden volumetrische Avatare erzeugt, um \u201edie Entwicklung von Narrativen zu erleichtern\u201c. Am Ende des Projekts, das seit M\u00e4rz 2020 f\u00fcr zwei Jahre l\u00e4uft, stehen nach Aussagen der Forscher unter anderem drei innovative Authoring-Tools: Eines f\u00fcr die hochaufl\u00f6sende volumetrische Erfassung von Aussehen und Bewegung der Schauspieler. Diese kann anschlie\u00dfend f\u00fcr hochwertige Offline-Produktionen (Film) und Echtzeit-Rendering Produktionen verwendet werden. Ein weiteres Tool dient zur Bearbeitung von hochaufl\u00f6sendem volumetrischen Aussehen und Bewegung, ein drittes f\u00fcr das Story-Authoring. Dazu z\u00e4hlen beispielsweise die Bearbeitung von Dekors, Layouts und animierten Charakteren.<\/p>\n

An dem Projekt sind zwei Forschungsgruppen der Abteilung VIT am Fraunhofer HHI (Computer Vision und Grafik und Immersive Medien und Kommunikation) sowie die Partner Ubisoft Motion Pictures, Volograms Limited, die Universit\u00e9 de Rennes 1 und Interdigital R&D France beteiligt.<\/p>\n","protected":false},"excerpt":{"rendered":"

Die Fortschritte in Bereich der Augmented und Virtual Reality erlauben den Nutzern immer realistischere Erfahrungen. Gerade erst ist es einem Informatiker der Universit\u00e4t Saarbr\u00fccken gelungen, virtuelle Welten physisch \u201eertastbar\u201c zu machen (IO berichtete). Nun sind Forscher der Abteilung Vision and Imaging Technologies (VIT) am Fraunhofer Heinrich-Hertz-Institut HHI dabei, neue Verfahren zu entwickeln, mit denen eine […]<\/p>\n","protected":false},"author":1660,"featured_media":519656,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"advgb_blocks_editor_width":"","advgb_blocks_columns_visual_guide":"","footnotes":""},"categories":[36843],"tags":[94228,105952,36957,27203],"location":[24328],"article_type":[],"serie":[],"archives":[],"internal_archives":[],"reboot-archive":[],"class_list":["post-222914","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-digital-de-de","tag-ar-de-de","tag-m-augmentes-reality-de","tag-virtual-reality-de-de","tag-vr-de-de","location-deutschland"],"blocksy_meta":[],"acf":{"subtitle":"","text_display_homepage":false},"author_meta":{"display_name":"Petra Wiesmayer","author_link":"https:\/\/ioplus.nl\/archive\/author\/petra-wiesmayer\/"},"featured_img":"https:\/\/ioplus.nl\/archive\/wp-content\/uploads\/2020\/05\/csm_Hanna-HoloV2_989c87602f.jpg","coauthors":[],"tax_additional":{"categories":{"linked":["Digital<\/a>"],"unlinked":["Digital<\/span>"]},"tags":{"linked":["AR<\/a>","m Augmentes Reality<\/a>","virtual reality<\/a>","VR<\/a>"],"unlinked":["AR<\/span>","m Augmentes Reality<\/span>","virtual reality<\/span>","VR<\/span>"]}},"comment_count":"0","relative_dates":{"created":"Posted 6 years ago","modified":"Updated 6 years ago"},"absolute_dates":{"created":"Posted on May 12, 2020","modified":"Updated on May 12, 2020"},"absolute_dates_time":{"created":"Posted on May 12, 2020 11:54 am","modified":"Updated on May 12, 2020 11:54 am"},"featured_img_caption":"","series_order":"","_links":{"self":[{"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/posts\/222914","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/users\/1660"}],"replies":[{"embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/comments?post=222914"}],"version-history":[{"count":0,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/posts\/222914\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/media\/519656"}],"wp:attachment":[{"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/media?parent=222914"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/categories?post=222914"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/tags?post=222914"},{"taxonomy":"location","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/location?post=222914"},{"taxonomy":"article_type","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/article_type?post=222914"},{"taxonomy":"serie","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/serie?post=222914"},{"taxonomy":"archives","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/archives?post=222914"},{"taxonomy":"internal_archives","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/internal_archives?post=222914"},{"taxonomy":"reboot-archive","embeddable":true,"href":"https:\/\/ioplus.nl\/archive\/wp-json\/wp\/v2\/reboot-archive?post=222914"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}