Tool Welt Wahrzeichen Fotos in 4D Erfahrungen transformiert

Mit öffentlich zugänglichen touristischen Fotos von Welt Sehenswürdigkeiten wie die Trevi-Brunnen in Rom oder Top of the Rock in New York City, haben die Forscher ein Verfahren entwickelt, wendige 3D-Bilder zu erstellen, die Änderungen zeigen im Aussehen im Laufe der Zeit.

Das Verfahren, das tiefe Lernen beschäftigt Fotos aufnehmen und synthesize Zehntausende meist unmarkiert und undatiert, löst ein Problem, dass die Experten in Computer Vision für sechs Jahrzehnte entzogen hat.

„Es ist eine neue Art und Weise Szenen Modellierung, die nicht nur ermöglicht es Ihnen, Ihren Kopf zu bewegen und sehen, zu sagen, die Brunnen aus verschiedenen Blickwinkeln, sondern gibt Sie auch Steuerelemente für die Zeit verändert“, sagte Noah Snavely, Associate Professor für Informatik an der Cornell Tech und leitende Autor des Buches „Crowdsampling die Plenoptic-Funktion“ auf der Europäischen Konferenz über Computer Vision vorgestellt, praktisch 23 bis 28 August statt.

„Wenn Sie wirklich auf die Trevi-Brunnen in Ihrem Urlaub gehen, wie es aussehen würde, würde davon abhängen, zu welchem ​​Zeitpunkt Du ging, in der Nacht, wäre es von unten durch Flutlicht beleuchtet werden. Am Nachmittag wäre es sonnendurchflutete sein, es sei denn, Sie an einem bewölkten Tag gehen „, sagte Snavely. „Wir haben gelernt, das gesamte Spektrum der Erscheinungen, basierend auf Tageszeit und Wetter, von diesen unorganisierten Fotosammlungen, so dass Sie den gesamten Bereich erkunden und gleichzeitig die Szene bewegen.“

Stellvertretend für einen Platz in einer fotorealistischen Art und Weise ist eine Herausforderung für die traditionelle Computer Vision, zum Teil wegen der schiere Anzahl von Texturen reproduziert werden. „Die reale Welt in ihrer Erscheinung so vielfältig und hat verschiedene Arten von Materialien, glänzende Dinge, Wasser, dünne Strukturen“, sagte Snavely.

Ein weiteres Problem ist die mangelnde Übereinstimmung der zur Verfügung stehenden Daten. Beschreiben, wie etwas aussieht aus jedem möglichen Blickwinkel in Raum und Zeit, als die plenoptischen Funktion bekannt ist, würde mit Hunderten von Webcams rund um eine Szene befestigt eine überschaubare Aufgabe, Daten Tag der Aufnahme und Nacht. Aber da dies nicht praktikabel ist, hatten die Forscher einen Weg zu entwickeln, zu kompensieren.

Werbung

Quelle: Cornell University. "Tool transforms world landmark photos into 4D experiences." ScienceDaily. ScienceDaily, 9 September 2020. <www.sciencedaily.com/releases/2020/09/200909100228.htm>.