畢業專題
Horus 多鏡頭人物追蹤
追蹤中斷後,如何認出同一個人?我負責把人物外觀比對接進團隊的追蹤系統。
- 我的角色
- 主要負責行人重新識別(person ReID):將人物照片轉成外觀特徵,設計多張照片比對與雙門檻判斷,並串接待比對任務及追蹤紀錄更新。
團隊原始測試情境:離開畫面後再出現;本人負責 ReID 比對與流程整合。(點圖放大)觀看團隊 Demo(YouTube) · 團隊程式與操作說明
要解決的問題
人物轉身、被遮住,或離開鏡頭再出現時,連續追蹤可能換掉原本的編號;臉部也不一定清楚可見。團隊整合追蹤、人臉辨識與行人重新識別,嘗試將分散的追蹤片段接起來。
- 競賽規模
- 東吳大學畢業專題評選;未取得當年公開總隊數及人數。
- 參賽成果
- 團隊獲畢業專題第一名。
輸入、處理與產出
- 輸入
- 多鏡頭追蹤片段,以及不同時間與角度的人物影像。
- 處理方式
- 本人整合FastReID特徵,多張取樣交叉比較相似度與支持比例,再以佇列接回追蹤紀錄。
- 產出
- 團隊多鏡頭人物追蹤與辨識展示,畢業專題第一名。
適用範圍
FastReID屬第三方模型;MOT、臉部辨識及完整系統由團隊分工,未宣稱完全解決遮蔽。
核心問題與我的做法
一張照片不可靠,就看多張照片的共同支持
遮蔽、轉身與角度變化,使單張外觀比對不足以支持身分連結。
本人設計追蹤片段取樣、多張交叉比對及相似度/支持比例雙門檻。 以FastReID特徵與cosine similarity計算,再依兩層條件整理匹配結果。
將外觀比對轉成可調整、可追查的判斷流程;不稱已完全解決遮蔽或誤認。
讓ReID結果能接回追蹤系統
追蹤片段持續產生,需要知道何時比對、何時完成與更新哪筆紀錄。
本人以佇列與狀態流程管理待比對追蹤紀錄。 串接第一/第二檢查、timeout、finished/update及DB更新交接。
ReID能進入團隊系統流程;整體團隊完成情境展示與畢業專題第一名,即時性仍有限制。
成果與驗證
團隊完成多鏡頭辨識系統與遮蔽、擦肩、離開後再出現等情境測試,獲 2020 年東吳大學畢業專題第一名;即時運作仍有限制。
FastReID · Cosine similarity · Person ReID