行人重識別(二)跨模態的行人重識別

2021-10-25 04:17:27 字數 602 閱讀 2260

感謝前輩總結的**列表,為了方便自己以後翻閱,鏈結擱這兒

在我們現實生活中,可見光條件下的攝像機拍到的影象,往往會包含行人的大部分外觀資訊,然而現實中並不只需要在可視條件極佳的條件下進行監控,在夜晚或者可視條件極差的場景中也有監控的需要,這個時候,紅外相機拍攝的影象便可用於行人的再識別。據我所知,現階段大部分reid工作都聚焦在rgb影象這種單一模態上,而基於rgb-ir的跨模態reid工作還沒有充分引起大家的關注,雖然這方面也有一些比較有創新性的文獻,但是或許礙於資料集不夠豐富,或者其他什麼原因,相對來說關注度還是挺低的,所以我來啦cross-modality person re-identification。

資料集少(reid界普遍存在的問題,學術界沒有場景複雜,規模龐大的資料集來研究,工業界有大量資料卻因為隱私問題開源不出來,害)

兩種模態之間存在較大差別,rgb三通道影象,存在顏色等可見光資訊,而ir(紅外)影象為單通道影象,只包含非可見光資訊,而且二者之間的波長範圍也是不同的,因此由這兩種模態的影象組成的資料集稱為「異構資料」。後面提供兩個這樣的資料集。

除此之外,單模態reid中的低解析度、遮擋、視角變化等問題在跨模態中必然也是存在的。(真令人頭禿)

這個資料集在之前一篇文章中提到過傳送門

行人重識別相關技術

行人重識別的相關技術 1 特徵表示 2 度量學習 metric learning 3 deep learning 特徵表示 研究行人物件的特徵表示方法,提取魯棒性的 更有鑑別力的特徵對行人進行表達。度量學習,亦稱 距離度量學習 distance metric learning 尋找乙個合適的距離度量...

行人重識別之重排序 re ranking

行人重識別簡稱re identification,目前研究這個方向的大神主要有,uts的鄭良,鄭哲東,cuhk的xiaotong等。這裡想分析下,2017年的cvpr,re ranking person re identification with k reciprocalencoding,文章主要...

行人重識別RE ID 瑣碎知識點總結

1.single shot 和muti shot 前者是指gallery中每個人的影象為一張 n 1 而後者是指gallery中每個人的影象為n 1張影象,同樣的rank 1下,一般n越大,得到的識別率越高。2.gallery probe和cmc gallery是候選行人庫,probe是待查詢輸入,...