COCAS: A Large-Scale Clothes Changing Person Dataset for Re-identification
2020-05-19 19:29:36
Paper: https://arxiv.org/pdf/2005.07862.pdf
Dataset:
1. Background and Motivation:
本文提出一種新的行人在識別,並且是換衣服的再識別任務:給定 prob 和 衣服模板,到 gallery 中去匹配。
此外,作者設計了一個 baseline 方法來結合衣服的特征 和 行人的生物特征,聯合起來進行再識別。為了完成這個任務,作者提出了一個新的行人換衣服的數據集,數據處理方法如下所示:
大致可以總結為如下幾個步驟:
1). Person Clustering: 利用 reid 算法進行聚類,然后手工扔掉 outlinear 的圖像;
2). Face Detection:選擇一張作為 anchor image,然后對其進行人臉檢測;
3). Face Retrieval:利用 FaceNet 抽取人臉特征,選擇 top-k 近鄰的圖像;
4). Manual Annotation:手動選擇真正匹配的行人圖像。
作者對行人選擇 2-3 個衣服,然后每一個衣服包含 2-5 張圖像。
2. Biometric-Clothes Network (BC-Net):
有了上述圖像,作者設計了如下的網絡結構來學習行人生物特征 和 衣服的特征,進行檢索。該模塊包含兩個部分:
如上圖所示,一個是對行人提取生物特征,一個是學習衣服的特征。
作者提到,在 BC-Net 中,衣服檢測器 和 特征提取器是分別進行訓練的。