Project R-15876

Titel

Parallax: Kostenefficiënte, fotorealistische 3D-content creatie via Artificiële Intelligentie (Onderzoek)

Abstract

Dankzij virtuele 3D-ervaringen kunnen we de wereld op een geheel nieuwe manier beleven. Het creëren van hoogwaardige 3D-content blijft echter duur, tijdrovend en is voorbehouden aan getalenteerde 3D-artiesten. 360-graden camera's laten toe om een fysieke wereld digitaal vast te leggen, maar zulk beeldmateriaal beperkt de bewegingsvrijheid van gebruikers tot het kunnen rondkijken vanuit het camerastandpunt zelf. Deze ervaringen missen het essentiële element van verkenning dat nodig is om het gevoel te hebben daadwerkelijk aanwezig te zijn op een bepaalde plek—of het nu gaat om games waarin we de hoofdrol spelen, sport- of concert streams die ons midden in de actie plaatsen, films waarin we de held zijn, of Virtual Reality-ervaringen die ons vervoeren naar virtuele tours en -tentoonstellingen. Recente doorbraken in novel-view synthesis (NVS), zoals Multi-Plane Images, Neural Radiance Fields (NeRF) en 3D Gaussian Splatting, bieden een veelbelovend alternatief. Deze technologieën maken het mogelijk om fotorealistische 3D-representaties te creëren op basis van standaard foto's of video's, waardoor de drempel voor 3D-digitalisering aanzienlijk verlaagd wordt. De adoptie van novel-view synthesis wordt echter beperkt door een complexe workflow en hoge hardwarekosten om de beelden te verwerken en het gebrek aan kennis om de best mogelijke resultaten te bereiken. Het doel van dit project is om KMO's in Vlaanderen de juiste handvaten te geven om kosten- en tijdsefficiënt bestaande omgevingen of objecten fotorealistisch in 3D te digitaliseren via alledaagse camera's. Deze foto's worden via novel-view synthesis verwerkt - AI algoritmen die leren hoe een omgeving eruit ziet vanuit eender welk standpunt op basis van enkele foto's of video's ervan. Door het introduceren van de juiste infrastructuur en uitgebreide doch gerichte informatie willen we de drempels voor de adoptie van deze beloftevolle nieuwe technologie elimineren.

Periode

01 oktober 2025 - 30 september 2027