Er is een overvloed aan sensorische informatie verzameld door sensoren sinds de opkomst van het internet der dingen. De combinatie van deze informatie (sensorfusie) om een ​​zinvol beeld te krijgen van het te observeren systeem heeft op dit moment veel vakkennis en menselijke engineering nodig, die niet goed opschaalt met de groeiende hoeveelheid beschikbare sensoren. Deze sensoren kunnen sterk variëren (multimodaliteit), variërend van complexe dieptecamera's tot verschillende LIDAR's en RADAR's. Mensen leren een intern benaderend model van hoe de wereld werkt en kunnen dat gebruiken om nieuwe ervaringen te begrijpen. We kunnen deze benaderde modellen ook gebruiken om verschillende nieuwe taken op te lossen. In dit onderzoek zullen we proberen de menselijke manier van doen na te bootsen
de wereld begrijpen om sensorfusie te bereiken.