人臉表情識別就是讓計算機識別人臉的各種表情，進而分析表情所代表的情緒，意圖等。人臉表情識別可以用在測謊，醫學輔助診斷，人機交互方面。 與人臉識別相比，人臉表情特征更加細微，而且受各種因素的干擾也更大。目前人臉表情識別的研究都是在數據庫上做測試。下面介紹幾個比較常見的數據庫。
1： The Japanese Female FacialExpression (JAFFE) Database
http://www.kasrl.org/jaffe.html
這個數據庫比較小，而且是一個比較老的數據庫了，早在1998年就發布了。該數據庫是由10位日本女性在實驗環境下根據指示做出各種表情，再由照相機拍攝獲取的人臉表情圖像。整個數據庫一共有213張圖像，10個人，全部都是女性，每個人做出7種表情，這7種表情分別是： sad, happy, angry, disgust,surprise, fear, neutral. 每個人為一組，每一組都含有7種表情，每種表情大概有3,4張樣圖。這樣每組大概20張樣圖，目前在這個數據庫上的識別率已經很高了，不管是person independent 或者是person dependent。識別率都很高。這個數據庫可以用來熟悉人臉表情識別的一些基礎知識，包括特征提取，分類等。
2： The Extended Cohn-Kanade Dataset(CK+)
http://www.pitt.edu/~emotion/ck-spread.htm
這個數據庫是在 Cohn-Kanade Dataset 的基礎上擴展來的，發布於2010年。這個數據庫比起JAFFE 要大的多。而且也可以免費獲取，包含表情的label和Action Units 的label。
這個數據庫包括123個subjects, 593 個 image sequence，每個image sequence的最后一張 Frame 都有action units 的label，而在這593個image sequence中，有327個sequence 有 emotion的 label。這個數據庫是人臉表情識別中比較流行的一個數據庫，很多文章都會用到這個數據做測試。具體介紹可以參考如下文獻：
P.Lucey, J. F. Cohn, T.Kanade, J. Saragih, Z. Ambadar, and I. Matthews, "TheExtended Cohn-KanadeDataset (CK+)_ A complete dataset for action unit andemotion-specifiedexpression," inComputer Vision andPattern RecognitionWorkshops (CVPRW), 2010 IEEE Computer Society Conference on,2010, pp. 94-101.
3： GEMEP-FERA 2011
這個數據是2011年，IEEE 的 Automatic Face & GestureRecognition and Workshops (FG 2011), 2011 IEEE International Conference on 上提供的一個數據庫，如果要獲取這個數據庫，需要簽署一個assignment，而且只有學術界可以免費使用。
這個數據庫擁有的表情圖很多，但是subjects 很少。具體介紹可以參考如下文獻：
M.F. Valstar, M. Mehu, B.Jiang, M. Pantic, and K. Scherer, "Meta-Analysis ofthe First FacialExpression Recognition Challenge,"Systems,Man, andCybernetics, Part B: Cybernetics, IEEE Transactions on, vol. 42,pp. 966-979,2012.
4： AFEW_4_0_EmotiW_2014
http://cs.anu.edu.au/few/emotiw2014.html
這個數據庫用作ACM 2014 ICMI TheSecond Emotion Recognition In The Wild Challenge and Workshop。去年已經進行了第一屆的競賽，這個數據庫提供原始的video clips, 都截取自一些電影，這些clips 都有明顯的表情，這個數據庫與前面的數據庫的不同之處在於，這些表情圖像是 in the wild, not inthe lab. 所以一個比較困難的地方在於人臉的檢測與提取。詳細信息可以參考如下文獻：
A.Dhall, R. Goecke, J. Joshi,M. Wagner, and T. Gedeon, "Emotion RecognitionIn The Wild Challenge2013," inProceedings of the 15thACM on Internationalconference on multimodal interaction, 2013, pp.509-516.
5: GENKI-4K
http://mplab.ucsd.edu/wordpress/?page_id=398
這個數據庫專門用於做笑臉識別的，整個數據庫一共有4000張圖片，分為“笑”和“不笑”兩種，圖片中的人臉並不是posed，而是spontaneous的，每個圖片的人臉的尺度大小也不一樣，而且還有姿勢，光照的變化，以及頭的轉動，相對於posed facialexpression, 這個數據庫的難度要更大。
詳細信息可以參考如下文獻：
WhitehillJ, Littlewort G, Fasel I, et al. Toward practical smile detection[J]. PatternAnalysis and Machine Intelligence, IEEE Transactions on, 2009, 31(11):2106-2111.
6：The UNBC-McMaster shoulder painexpression archive database
http://www.pitt.edu/~emotion/um-spread.htm
這個數據庫用於做pain的表情識別，目前發布的數據庫包含25個subject，200個video sequences，每個video sequence的長度不一，從幾十幀圖到幾百幀圖，每張圖都有66 個facial landmarks，pain的intensity (0-15)，以及facial action units的編號，每個video sequence也有一個整體pain的 OPI。
詳細信息可以參考如下文獻：
Lucy,P., Cohn, J. F., Prkachin, K. M., Solomon, P., & Matthrews, I. (2011).Painful data: The UNBC-McMaster Shoulder Pain Expression Archive Database. IEEEInternational Conference on Automatic Face and Gesture Recognition (FG2011).
7：Bimodal Face and Body GestureDatabase （FABO）
http://www.eecs.qmul.ac.uk/~hatice/fabo.html
這個數據庫與其它數據庫相比，多了gesture的信息，目前利用multimodality 做情感計算的嘗試取得很多進展，利用語音信息，人臉表情，body language等做emotion analysis正在受到越來越多的關注，這個數據庫就是從facial expression與body gesture兩個方面考慮人的情感，不過這個數據庫的ground truth label 很繁瑣，具體的信息可以參考：
GunesH, Piccardi M. A bimodal face and body gesture database for automatic analysisof human nonverbal affective behavior[C]//Pattern Recognition, 2006. ICPR 2006.18th International Conference on. IEEE, 2006, 1: 1148-1153.