Nu är digitala scener äntligen fotorealistiska tack vare ny AI-teknik
Baserad på forskning av Dana Cohen-Bar, Ido Sobol, Raphael Bensadoun, Shelly Sheynin, Oran Gafni
Att skapa videomaterial som både känns helt verkligt och håller exakt de geometrisk former man specifikt efterfrågat har länge varit ett paradoxala mål inom grafisk teknik. Traditionella 3D-motorer ger perfekt struktur men upplevs ofta konstiga, medan modern AI genererar otrolig realism men glömmer bort den underliggande tredimensionella logiken och konsekvensen i rörelser.
Den nyligen presenterade metoden RealMaster löser detta genom att använda avancerad video-diffusion för att höja detaljnivån på riktade scener utan att tappa kontrollen. Tekniken tränas på parvisa dataset där start- och slutbilder först uppdateras för realism och sedan sprids över mellanscenen med hjälp av geometriska ledtrådar. En särskild modell distillerar denna process till en form som kan hantera nya objekt som dyker upp under filmförloppet och kräver ingen referensbild vid själva framtagandet.
Utvärdering på komplexa sekvenser från spelfrank GTA V visar att lösningen klarar sig bäst av nuvarande alternativ genom att erbjuda högre bildkvalitet samtidigt som den bevarar identiteten, rörelsen och formen angiven i ursprungsmodellen. Detta bryter en gammal kompromiss mellan kreativ frihet och teknisk exakthet och öppnar vägen för fotorealistiska videor styra helt av 3D-scenografi utan att hamna i det onaturliga.
Cohen-Bar, D., et al. (2026), RealMaster: Lifting Rendered Scenes into Photorealistic Video, https://arxiv.org/abs/2603.23462