Narzędzie przemienia świat zdjęć przełomowe język 4D doświadczeń

Metoda, która zatrudnia głęboką naukę łykać i syntetyzować dziesiątki tysięcy głównie nieoznaczonych i datowanych zdjęć, rozwiązuje problem, który umyka ekspertów w wizji komputerowej przez sześć dekad.

„To nowy sposób modelowania scen, które nie tylko pozwala, aby przenieść swoją głowę i zobaczyć, powiedzieć, fontannę z różnych punktów widzenia, ale daje również kontroluje na zmianę czasu”, powiedział Noah Snavely, profesor informatyki na Uniwersytecie Cornella tech i starszy autor „Crowdsampling funkcji Plenoptic”, przedstawiony na Konferencji Europejskiej w Computer Vision, która odbyła się 23-28 sierpnia wirtualnie.

„Jeśli naprawdę poszedł do Fontanny di Trevi na wakacjach, tak to będzie wyglądać, będzie zależeć od tego, co razem poszło, w nocy, byłoby oświetlone przez reflektorów od dołu. W godzinach popołudniowych, byłoby nasłonecznione, chyba poszedł w pochmurny dzień”Snavely powiedział. „Dowiedzieliśmy się cały szereg występów, w zależności od pory dnia i pogody, od tych niezorganizowanych zbiorów fotograficznych, tak, że można zbadać cały zakres i jednocześnie poruszać się na scenie.”

Reprezentujący miejsce w fotorealistyczny sposób jest wyzwaniem dla tradycyjnej wizji komputerowej, częściowo ze względu na duża liczba faktur być powielane. „Prawdziwy świat jest tak zróżnicowane w swoim wyglądzie i ma różne rodzaje materiałów, błyszczące rzeczy, wody, cienkich struktur” Snavely powiedział.

Innym problemem jest niezgodność z dostępnych danych. Opisując, jak coś wygląda z każdego możliwego punktu widzenia w czasie i przestrzeni, znanej jako funkcja plenoptic, będzie zarządzać zadanie z setek kamer zamocowanych wokół sceny, nagrywanie danych i dzień noc. Ale ponieważ nie jest to praktyczne, naukowcy musieli opracować sposób, aby zrekompensować.

Reklama