Aaron Ho

畢業專題

Horus 多鏡頭人物追蹤

追蹤中斷後,如何認出同一個人?我負責把人物外觀比對接進團隊的追蹤系統。

我的角色
主要負責行人重新識別(person ReID):將人物照片轉成外觀特徵,設計多張照片比對與雙門檻判斷,並串接待比對任務及追蹤紀錄更新。
團隊拍攝的Horus測試情境:人物被樹木遮蔽,離開畫面後再出現
團隊原始測試情境:離開畫面後再出現;本人負責 ReID 比對與流程整合。(點圖放大)

要解決的問題

人物轉身、被遮住,或離開鏡頭再出現時,連續追蹤可能換掉原本的編號;臉部也不一定清楚可見。團隊整合追蹤、人臉辨識與行人重新識別,嘗試將分散的追蹤片段接起來。

競賽規模
東吳大學畢業專題評選;未取得當年公開總隊數及人數。
參賽成果
團隊獲畢業專題第一名。

輸入、處理與產出

輸入
多鏡頭追蹤片段,以及不同時間與角度的人物影像。
處理方式
本人整合FastReID特徵,多張取樣交叉比較相似度與支持比例,再以佇列接回追蹤紀錄。
產出
團隊多鏡頭人物追蹤與辨識展示,畢業專題第一名。

適用範圍

FastReID屬第三方模型;MOT、臉部辨識及完整系統由團隊分工,未宣稱完全解決遮蔽。

核心問題與我的做法

一張照片不可靠,就看多張照片的共同支持

遮蔽、轉身與角度變化,使單張外觀比對不足以支持身分連結。

本人設計追蹤片段取樣、多張交叉比對及相似度/支持比例雙門檻。 以FastReID特徵與cosine similarity計算,再依兩層條件整理匹配結果。

將外觀比對轉成可調整、可追查的判斷流程;不稱已完全解決遮蔽或誤認。

讓ReID結果能接回追蹤系統

追蹤片段持續產生,需要知道何時比對、何時完成與更新哪筆紀錄。

本人以佇列與狀態流程管理待比對追蹤紀錄。 串接第一/第二檢查、timeout、finished/update及DB更新交接。

ReID能進入團隊系統流程;整體團隊完成情境展示與畢業專題第一名,即時性仍有限制。

成果與驗證

團隊完成多鏡頭辨識系統與遮蔽、擦肩、離開後再出現等情境測試,獲 2020 年東吳大學畢業專題第一名;即時運作仍有限制。

FastReID · Cosine similarity · Person ReID