Foreground extraction in video conferences using motion flow analysis

Abstract

Teza abordează domeniul segmentării în timp real a elementelor de prim-plan din secvenţe video monoculare, cu accentul pe aplicaţii de tip videoconferinţă. Lucrarea propune o metodologie de segmentare bazată exclusiv pe analiza fluxurilor optice combinată cu analiza informaţiei de culoare şi contrast din cadrele video. Metoda se distinge faţă de alte abordări prin faptul că procesul de segmentare nu foloseşte modele definite a priori cu privire la structura scenei observate sau la cea a obiectelor din prim-plan şi prin eliminarea necesităţii fazelor de iniţializare sau antrenament. Teza introduce un algoritm de agregare a fluxurilor optice dense şi rare în scopul segmentării robuste şi cu precizie a zonelor aflate în mişcare. Rezultatul este supus unei tehnici de integrare temporală pentru a produce o imagine aproximativă a prim-planului expus în urma analizei fluxurilor optice. Ultima fază a metodei introduce un nou algoritm de segmentare nesupervizată de tip graph-cut, responsabil cu obţinerea imaginii precise, la nivel de pixel, a obiectelor din prim-planul secvenţei video.