Single Object Tracking in the Presence of Distractors

Videnović, Jovana (avtor), Kristan, Matej (mentor), Lukežič, Alan (komentor)

This thesis presents a novel approach for single object tracking in the presence of distractors. We define distractors as objects that are visually similar to the tracked target. This visual similarity in practice increases the tracking uncertainty, often leading to tracking failure when the tracker shifts from a target to a distractor. The proposed technique, named Multiple Hypotheses Single Object Tracker (MHSOT), builds upon a recent TransT tracker by including modules for motion estimation, feature extraction, and data association. Additionally, we gather a collection of sequences containing distractors to form the comprehensive Distractor dataset. We evaluate our method, along with the TransT, on the Distractor dataset and its short-term and long-term segments. MHSOT tracker achieves 51.7% mIoU on the whole Distractor dataset, surpassing the TransT by 3.6%. MHSOT and TransT perform better on short-term sequences than on long-term sequences. On short-term sequences, MHSOT outperforms the TransT by 6.1%, reaching 71.5% mIoU. On long-term sequences, MHSOT outperforms the TransT by 3.3% and achieves 50.1% mIoU. MHSOT demonstrates particular superiority over the reference method in re-detecting the target even after extended periods of absence and handling scenarios involving occlusion.

• Jezik: Angleški jezik
• Ključne besede: computer vision, single object tracking, tracking-by-detection, data association, distractors
• Vrsta gradiva: Diplomsko delo/naloga
• Tipologija: 2.11 - Diplomsko delo
• Organizacija: FRI - Fakulteta za računalništvo in informatiko
• Leto izida: 2023
• PID: 20.500.12556/RUL-152728
• COBISS.SI-ID: 167529475
• Datum objave v RUL: 04.12.2023

Sekundarni jezik

• Jezik: Slovenski jezik
• Naslov: Sledenje objekta ob prisotnosti distraktorjev

Izvleček

V diplomski nalogi predstavljamo inovativen pristop za obravnavo sledenja objekta ob prisotnosti distraktorjev. Distraktorje definiramo kot objekte, ki imajo veliko vizualnih podobnosti s tarčo. Ta vizualna podobnost v praksi poveča negotovost sledenja in pogosto vodi v neuspeh sledenja, ko sledilnik začne slediti distraktorju. Razvita metoda, poimenovana MHSOT, temelji na sledilniku TransT in uvaja nove module za oceno gibanja, izračun značilk ter asocijacijo podatkov. Poleg tega izberemo množico sekvenc, ki vključujejo distraktorje ter tako pridobimo celovit nabor podatkov imenovan Distractor dataset. Našo metodo, skupaj z referenčnim sledilnikom TransT, evalviramo tako na celotnem naboru podatkov, kot pa na njegovih kratkoročnih ter dolgoročnih sekvencah ločeno. Sledilnik MHSOT doseže 51.7% mIoU na množici Distractor dataset, kar predstavlja izboljšavo metode TransT za 3.6%. Sledilnika sta se bolje obnesla na kratkoročnih sekvencah, kjer je MHSOT dvignil uspešnost TransT metode za 6.1% mIoU, iz inicijalnih 67.4% na 75.1%. Na dolgoročnih sekvencah je MHSOT dosegel 50.1% mIoU oz. 3.3% mIoU več kot TransT. MHSOT izkazuje izjemno superiornost nad referečno metodo v redetekciji tarče, tudi po daljših obdobjih odsotnosti ter v primerih okluzije.

• Ključne besede: računalniški vid, sledenje enega objekta, sledenje z zaznavanjem, asocijacija podatkov, distraktorji