Europäischer Forschungspreis für Informatiker Christian Theobalt: 4-D-Rekonstruktion echter Szenen

Um reale Szenen in virtuelle dreidimensionale Welten zu übertragen, wird heute ein hoher Aufwand betrieben. Der Saarbrücker Informatik-Professor Christian Theobalt will dies vereinfachen und stark beschleunigen. Mit Hilfe von nur einer Kamera sollen sich Computer künftig selbstständig Rechenverfahren erarbeiten und diese laufend optimieren, um damit Szenen realitätsgetreu sowohl räumlich als auch zeitlich zu erfassen. Dafür erhielt Theobalt jetzt den mit zwei Millionen Euro dotierten „ERC Consolidator Grant“ des Forschungsrates der Europäischen Union. Er wird damit nach seinem ERC Starting Grant im Jahr 2013 bereits zum zweiten Mal vom ERC ausgezeichnet. Von seiner Forschung werden nicht nur autonome Systeme und Roboter sowie Anwendungen der virtuellen und erweiterten Realität profitieren, sondern auch die Medizin und die Ingenieurwissenschaften.

Als amerikanische Forscher ein 3D-Druck-Porträt des früheren US-Präsidenten Barack Obama anfertigen wollten, mussten sie eine Vorrichtung bauen, die aus 50 LED-Lichtern und 14 Spezial-Kameras bestand. Zusätzlich montierten sie zehn verschiedene Blitzlichter und entwickelten für die Produktion Lichtscanner, um das Gesicht Obamas in ein digitales Ebenbild zu überführen. Christian Theobalt, Leiter Forschungsgruppe Graphics, Vison & Video am Max-Planck-Institut für Informatik in Saarbrücken und Informatik-Professor an der Universität des Saarlandes, will das in Zukunft mit nur einer Kamera schaffen. „Niemand will für solche 3D-Anwendungen ein Multi-Kamera-System mit sich herumtragen, das ist illusorisch“, erklärt er. In der Forschung habe man in den vergangenen Jahren erhebliche Fortschritte gemacht. „Jedoch bezogen sich diese vor allem auf sehr spezifische Anwendungen, etwa um Gesichtsausdrücke oder Handbewegungen zu erfassen. Dabei wurden auch meist optimale Bedingungen und spezielle Kamerasysteme vorausgesetzt“, führt Theobalt weiter aus.

Um generelle komplexe sich bewegende Realweltszenen dreidimensional zu erfassen und auch die zeitliche Komponente als so genannte vierte Dimension hinzuzufügen, reichten die aktuellen Verfahren nicht aus. „Am Beispiel von Alltagsszenen lässt sich das gut beschreiben: In vielen realen Umgebungen bewegen sich Menschen auf komplexe Art und Weise, verdecken sich, interagieren in oft feinster Weise mit vielen Objekten in der Szene. Ähnlich im Straßenverkehr – Auf einer Straßenkreuzung passieren im Sekundentakt Fahrzeuge die Fahrbahn, sie verdecken sich gegenseitig und biegen unvermittelt in verschiedene Richtungen ab. Autonome Roboter, die mit Menschen effizient und sicher kooperieren sollen, sowie autonome Fahrzeuge müssen mit solchen Situationen umgehen und sie im Detail rekonstruieren können. 4D Rekonstruktion ist also die Grundlage für deren Wahrnehmungsfähigkeiten, das Problem ist aber sehr komplex“, erläutert Theobalt. Um dies dennoch zu ermöglichen, will der Saarbrücker Informatiker zwei Spezialfelder auf methodisch neue Art und Weise miteinander verbinden. Das sind zum einen so genannte modellbasierte Methoden, die in der Vergangenheit bei sehr spezifischen Szenen, beispielsweise beim Erfassen von Gesichtern, zum Einsatz kamen. Zum anderen setzt Theobalt auf das maschinelle Lernen und dabei insbesondere auf das so genannte Deep Learning. Das auf neuronalen Netzen beruhende Lernverfahren sorgt schon seit einiger Zeit in der Wissenschaft für Furore. Allerdings müssen diese neuronalen Netze auch trainiert werden und dazu in der Trainingsphase überwacht werden. „Das setzt wiederum eine Menge von Trainingsdaten voraus, für welche die korrekte Lösung, also die korrekte 4D Rekonstruktion bekannt ist. Bei komplexen Alltagsszenen ist das jedoch nicht machbar“, so Theobalt.

Daher will er mit seiner Gruppe die Grundlagen erarbeiten, damit in Zukunft Computer selbstständig aus vielen Bilddaten das Modell wählen, auf dem das digitale Abbild in punkto Geometrie, Bewegung sowie Material- und Beleuchtungseigenschaften der sichtbaren Oberfläche beruht. Sie sollen dann auch die Methode bestimmen, mit der sie die Szene rekonstruieren, und diese stets auf Grundlage neuer gefilmten Daten automatisch verbessern. Auf diese Weise müsste man künftig Roboter nicht mehr programmieren, sondern man könnte ihnen die von ihnen zu bewerkstelligenden Vorgänge einfach vorführen. Sie würden beobachten und dadurch lernen. „Jede Anwendung, die auf der Analyse realer Szenen beruht, wird von unseren Ergebnissen profitieren“, so Theobalt, „also nicht nur autonome Systeme und die erweiterte, virtuelle Realität, sondern auch Anwendungen im Sport, in der Biomechanik, in der Medizin, der Mensch-Maschine-Interaktion und in den Ingenieurwissenschaften.“

Mit den Fördermitteln der Europäischen Union in Höhe von zwei Millionen Euro wird Christian Theobalt am Max-Planck-Institut für Informatik Stellen für Doktoranden und promovierte Wissenschaftler schaffen. Das ist das Ziel des Europäischen Forschungsrates, kurz ERC, der mit seinen Forschungspreisen herausragende Wissenschaftler allein auf Basis der wissenschaftlichen Exzellenz des Antragstellers und der Vorreiterrolle des Forschungsantrags fördert. Sie werden beim Ausbau ihrer Forschungsgruppen unterstützt und können eigene Forschungsvorhaben vorantreiben.

Hintergrund Christian Theobalt:
Christian Theobalt ist Professor für Informatik und Leiter der Forschungsgruppe “Graphics, Vision & Video” am Max-Planck-Institut für Informatik in Saarbrücken. Er ist auch Professor für Informatik an der Universität des Saarlandes. Von 2007-2007 war er Gastprofessor an der Stanford University. Er erhielt seinen Master of Science in Artificial Intelligence an der University of Edinburgh, sein Diplom in Informatik an der Universität des Saarlandes, und wurde am Max-Planck-Institut für Informatik zum Dr.-Ing. promoviert.

In seiner Forschung beschäftigt er sich mit grundlegenden algorithmischen Fragen im Grenzgebiet der Computer Vision, der Computergrafik, der Mensch-Maschine Interaktion und des Maschinellen Lernens. Insbesondere forscht er an: Algorithmen zur 3D Rekonstruktion statischer und dynamischer Szenen, virtueller und erweiterter Realität, markerlosen Motion Capture Verfahren, Computeranimationsmethoden, Methoden zum inversen Rendering (Schätzung von Material und Beleuchtungseigenschaften), maschinellen Lernverfahren zur Unterstützung der 3D/4D Rekonstruktion, neuen Kameras und Sensoren, Methoden der semantischen Videoverarbeitung, und Methoden des bildbasierten Renderings.
Für seine Arbeiten wurde er mit zahlreichen Preisen ausgezeichnet, unter anderem mit der Otto-Hahn-Medaille der Max-Planck-Gesellschaft im Jahr 2007, dem EUROGRAPHICS Young Researcher Award im Jahr 2009, und dem Deutschen Mustererkennungspreis im Jahr 2012. Er erhielt zwei ERC Grants der Europäischen Union, einen ERC Starting Grant im Jahr 2013 und einen ERC Consolidator Grant im Jahr 2017. Das Magazin Capital wählte ihn im Jahr 2015 unter die „Top 40 Innovation Leaders under 40“ in Deutschland. Er ist auch einer der Gründer der the Captury GmbH in Saarbruecken, einem mehrfach ausgezeichneten Spin-off seiner Arbeitsgruppe, das eine revolutionäre neue Methode zur markerlosen Bewegungsmessung verkauft.

Weitere Informationen:

https://erc.europa.eu/news/erc-2017-consolidator-grants-results
https://people.mpi-inf.mpg.de/~theobalt/
http//gvv.mpi-inf.mpg.de

Fragen beantworten:

Professor Christian Theobalt
Max-Planck-Institut für Informatik
Saarland Informatics Campus
Tel.: +49 681 9325 4028
E-mail: theobalt@mpii.de

Redaktion:
Gordon Bolduan
Kompetenzzentrum Informatik Saarland
Saarland Informatics Campus E1.7
Tel: +49 681 302-70741
E-Mail: gbolduan@mmci.uni-saarland.de