作為重要的非語言交流線索，微表情可以揭示一個人的真實情緒狀態(tài)。特別是隨著深度學(xué)習(xí)方法在微表情分析領(lǐng)域的蓬勃發(fā)展，微表情分析的發(fā)展得到了關(guān)注。然而，心理學(xué)和人工智能的研究都受到了微表情小樣本的限制。 　　  

　　中國科學(xué)院心理研究所微表情應(yīng)用研究中心建立了CAS(ME)3數(shù)據(jù)庫，這是一個大規(guī)模、自發(fā)的微表情數(shù)據(jù)庫，包含了樣本的深度信息，并且具有高生態(tài)效度。該數(shù)據(jù)庫有望引領(lǐng)下一代微表情分析的發(fā)展。   

　　數(shù)據(jù)規(guī)模對于基于人工智能的微表情分析至關(guān)重要。CAS(ME)3提供了約80小時的視頻，超過800萬幀，包括1109個人工標(biāo)注的微表情和3490個宏觀表情。CAS(ME)3的大樣本量可以有效地進(jìn)行微表情分析方法驗證，同時避免數(shù)據(jù)庫偏差。   

　　CAS(ME)3的亮點之一是數(shù)據(jù)庫中的樣本包含深度信息。引入深度信息這一模態(tài)的靈感來自于基于人類視覺感知的微表情識別心理學(xué)實驗。受試者被要求觀看2D和3D微表情視頻，并回答關(guān)于視頻的情緒價值、情緒類型和情緒強(qiáng)度的三個問題。被試在觀看3D視頻的情況下，反應(yīng)時間更短、強(qiáng)度評分更高，這表明深度信息可以促進(jìn)個體對微表情的識別。在證明了深度信息對人類視覺感知的有效性后，研究團(tuán)隊繼續(xù)進(jìn)行智能微表情分析的工作，并且證明了在深度信息的幫助下，算法對微表情的連續(xù)變化更加敏感。 

圖1.微表情樣本：RGB圖像和深度信息（Part A - spNO.216：AU R1+R2，驚喜）

　　CAS(ME)3的另一個亮點是它的高生態(tài)效度。在微表情誘發(fā)的過程中，研究者優(yōu)化了采集環(huán)境，設(shè)計了模擬犯罪的誘發(fā)范式，使之盡可能接近現(xiàn)實。并且，在數(shù)據(jù)采集的過程中，同時通過攝像機(jī)和可穿戴設(shè)備收集視頻、語音和生理信號，包括皮膚電活動、心率/指尖脈搏、呼吸和脈搏等。實驗表明，高風(fēng)險場景（如犯罪）中的被試比低風(fēng)險場景（如無罪）中的被試泄露更多的微表情。這種高生態(tài)效度的樣本為真實場景中微表情分析和情緒理解提供了基礎(chǔ)。 

　　此外，在算法層面，緩解微表情小樣本問題的手段之一是無監(jiān)督學(xué)習(xí)。作為無監(jiān)督學(xué)習(xí)的一個研究方向，自監(jiān)督學(xué)習(xí)已經(jīng)成為一個熱門話題。使用額外的深度信息或更多的微表情幀來生成標(biāo)簽并構(gòu)建微表情分析的自監(jiān)督學(xué)習(xí)模型是很自然的一種設(shè)想。CAS(ME)3提供了1,508個無標(biāo)簽的視頻，超過4,000,000幀，搭建了基于無監(jiān)督學(xué)習(xí)的微表情分析的數(shù)據(jù)平臺。   

　　心理所傅小蘭研究員帶領(lǐng)的研究團(tuán)隊此前已經(jīng)發(fā)布了三個微表情數(shù)據(jù)庫：CASME、CASME II和CAS(ME)2。這些數(shù)據(jù)庫被來自50多個國家的600多個研究團(tuán)隊申請試用，并且超過80%的微表情分析文章至少使用了其中一個數(shù)據(jù)庫進(jìn)行方法驗證。 

　　基于CAS(ME)3與之前的CASME系列數(shù)據(jù)庫，未來有望出現(xiàn)基于自監(jiān)督學(xué)習(xí)和基于深度信息、生理和語音信號的多模態(tài)微表情分析研究。 

　　隨著數(shù)據(jù)驅(qū)動的科研范式的形成，研究所越來越重視心理學(xué)研究中的科學(xué)數(shù)據(jù)工作，正在積極建設(shè)中國科學(xué)院心理研究所科學(xué)數(shù)據(jù)中心。該數(shù)據(jù)庫未來可通過科學(xué)數(shù)據(jù)中心提供的平臺申請使用。 

　　該研究獲得國家自然科學(xué)基金、中國博士后科學(xué)基金和國家重點研發(fā)計劃的資助，并于近期發(fā)表在IEEE Transactions on Pattern Analysis and Machine Intelligence上。 

　　論文信息：Li, J., Dong, Z., Lu, S., Wang, S. J. *, Yan, W. J., Ma, Y., Liu, Y., Huang, C., & Fu, X.* (2022). CAS (ME) 3: A Third Generation Facial Spontaneous Micro-Expression Database with Depth Information and High Ecological Validity. IEEE Transactions on Pattern Analysis and Machine Intelligence. DOI: 10.1109/TPAMI.2022.3174895.  

相關(guān)知識

iOS 健康 數(shù)據(jù)數(shù)據(jù)庫分析
召集30多位成員組建健康醫(yī)療大數(shù)據(jù)生態(tài)聯(lián)盟，“國家隊”統(tǒng)合健康數(shù)據(jù)時代已經(jīng)來臨？
董爾丹院士：大數(shù)據(jù)時代，數(shù)據(jù)驅(qū)動的健康科技創(chuàng)新勢在必行
深度解讀三
AI時代的職業(yè)轉(zhuǎn)型：從挑戰(zhàn)到機(jī)遇的深度探索
【電子病歷和健康醫(yī)療大數(shù)據(jù)系列】衛(wèi)寧健康：大數(shù)據(jù)與電子病歷未來將深度融合互為一體
衛(wèi)寧健康：大數(shù)據(jù)與電子病歷未來將深度融合，互為一體【電子病歷和健康醫(yī)療大數(shù)據(jù)系列】
B2B醫(yī)藥電商平臺搭建：構(gòu)建高效、智能、合規(guī)醫(yī)藥行業(yè)數(shù)字化生態(tài)
美年健康A(chǔ)ll in AI，開創(chuàng)數(shù)智化健康管理新生態(tài)
北方健康醫(yī)療大數(shù)據(jù)怎么樣;北方健康醫(yī)療大數(shù)據(jù)中心

網(wǎng)址: 心理所創(chuàng)建第三代高生態(tài)效度的深度微表情數(shù)據(jù)庫 http://m.u1s5d6.cn/newsview491614.html