Microsoft Research stoji iza brojnih stvari koje su danas u srcu gadgeta poput HoloLensa ili Kinecta, no čak i kada takvi proizvodi ugledaju svjetlo dana na tržištu - inženjerske ruke opet pronalaze neke nove primjene. Jedna takva je 'semantičko bojenje' stvarnih predmeta u digitalnom obliku
Demo naziva SemanticPaint omogućuje 3D skeniranje objekata koji okružuju korisnika pomoću Kinect kamerice, a dok to nije novo - mogućnost izdvajanja i definiranja pojedinih objekata na prikazu to svakako jest.
3D scenu računalo u početku prepoznaje kao jedan 3D objekt s više ploha, no korisnik može tek jednim dodirom definirati pojedine objekte. Štoviše, iz tog procesa računalo uči - pa će sve slične ili iste objekte na sceni također moći izdvojiti automatikom.
Jednom kada sustav bude uznapredovao, korisnici će moći hodati s 3D kamericom i kreirati potpuno digitalizirani prikaz prostora - sa odvojenim objektima, zahvaljujući kojima će manipulacija tog prostora u virtualnom ili AR svijetu biti lakša no ikad prije:
