En vanlig telefonvideoklipp får nu generera en heltäckande tredimensionell modell
Baserad på forskning av Jae Won Jang, Yeonjin Chang, Wonsik Shin, Juhwan Cho, Nojun Kwak
Ny teknik från forskare gör det möjligt att återge komplexa 360-graders former utifrån ett enda vanligt videofilmaterial. Tidigare lösningar stridde mot sina egna begränsningar genom att överanpassa sig till ytor som var synliga i specifika vinklar, vilket försvårade modellering av bakre sidor på rörliga föremål.
Genom att använda en avancerad tredimensionell initiering som fungerar oberoende av traditionella tvådimensionella gissningar löses problemet med osäker geometri vid tilldelningar. Ett eget system för spårning av punkter använder säkra visningar som ankare för att minska drift och bibehålla struktur även när delar döljs av andra objekt. Resultatet blir en konsekvent modell som klur ut hela rörelsemönstret oavsett vilken vinkel kameran befinner sig i under inspelningen.
Testning på nya benchmark-dator visar att lösningen presterar överlägset jämfört med tidigare metoder både visuellt och i mätningar. Den nya standarden för bedömning har satts genom att placera testkameror upp till 135 grader bort från träningsdata, vilket inte varit möjligt innan. Framtiden för tredimensionell modellering ser allt ljusare ut med hjälp av enkel videoinspelning.
4DGS360: 360° Gaussian Reconstruction of Dynamic Objects from a Single Video Jae Won Jang, Yeonjin Chang, Wonsik Shin, Juhwan Cho, Nojun Kwak https://arxiv.org/abs/2603.21618