1、情感識別系統的建構人與人之間為什么要進行情感識別與情感交流呢？我們為什么要大力發展計算機的情感表達和情感識別技術。一般的觀點認為，計算機的“情感識別”就是為了使計算機能夠通過觀察表情、行為和情感產生的前提環境來推斷情感狀態，基本目的在于使計算機能夠與人進行情感交流，從而構造出友好的人機界面。然而，情感識別的基本目的遠非如此。一、情感識別的客觀目的事實上，人與人之間進行情感識別與情感交流存在著一定的客觀動機。分工與合作是人類提高社會生產力最有效的方式，人們為了更好地進行分工合作，一方面必須及時地、準確地通過一定的“情感表達”方式向他人展現自己的價值關系，另一方面必須及時地、準確地通過一定的“情感

2、識別”方式了解和掌握對方的價值關系，才能夠在此基礎上，分析和判斷彼此之間的價值關系，才能做出正確的行為決策?？傊楦凶R別的客觀本質或客觀動機就是人為了了解和掌握對方的價值關系。由于人與人之間存在不同類型的利益相關性，對方所展現的情感有時是完全準確的方式，有時是夸張掩飾的方式，有時卻是完全相反的方式，這時，人就需要不斷地調整和修正對方的情感表達的客觀價值內容，使自己的情感識別具有更高的及時性、準確性和完整性。二、情感識別的計算機處理技術人類可以通過視覺、味覺、聽覺、嗅覺和觸覺五個器官來認識世界，而對于他人情感的識別主要是通過視覺和聽覺來完成的，即主要是通過人臉的情感識別、語言聲調的情感識別和語

3、言文字的情感識別來完成的。1、人臉的情感識別。把用眼睛觀察到的視覺信息叫做圖象信息，如人臉的表情信息。一般的表情識別可以用單個感官完成，也可以用多個感官相配合來完成，它是一個整體識別和特征識別共同作用的結果。具體說來，遠處辨認人，主要是依靠人臉的整體識別，而在近距離辨認人，主要是依靠人臉的特征識別。人臉的整體識別和特征識別雖然存在聯系，但總體說是分開的、并行的處理過程。隨著人臉的計算機處理技術（包括人臉檢測和人臉識別）不斷完善，利用計算機進行面部表情分析也就成為可能。由于各種面部表情本身體現在各個特征點運動上的差別并不是很大，而表情分析對于人臉的表情特征提取的準確性和有效性要求比較高，因而難以

4、順利地實現。例如：嘴巴張開并不代表就是笑，也有可能是哭和驚訝等。目前所用到的識別特征主要有：灰度特征、運動特征和頻率特征三種?；叶忍卣魇菑谋砬閳D像的灰度值上來處理，利用不同表情有不同灰度值來得到識別的依據；運動特征利用了不同表情情況下人臉的主要表情點的運動信息來進行識別；頻域特征主要是利用了表情圖像在不同的頻率分解下的差別，速度快是其顯著特點。具體的表情識別方法主要有三個：一是整體識別法和局部識別法，二是形變提取法和運動提取法，三是幾何特征法和容貌特征法。當然，這三個發展方向不是嚴格獨立的，恰恰相反，是相互聯系，相互影響的，它們只是從不同側面來提取所需要的表情特征，都只是提供了一種分析表情的思

5、路。2、語言聲調的情感識別。一般來說，不同語言聲調表情的語言信號在其時間構造、振幅構造、基頻構造和共振峰構造等特征方面也有著不同的構造特點和分布規律。由此，只要把各種具體模式的語言聲調表情在時間構造、振幅構造、基頻構造和共振峰構造等特征方面的構造特點和分布規律進行測算和分析，并以此為基礎或模板，就可以識別出所有語言聲調中所隱含的情感內容。3、語言文字的情感識別。語言和文字屬于第二信號系統，由于它們脫離了現實事物對于人的條件反射活動的直接參與，從而可以更為廣泛地、普遍地、直接地、快速地、靈活地、多樣地、深入地對各種事物進行認識，從而可以使人類能夠對更為抽象、更為本質、更為遙遠、更為間接、更為廣泛

6、、更為模糊、更為變化莫測的事物的價值關系進行認識和反應。三、情感識別的邏輯程序1、人臉的情感識別的邏輯程序。當人通過視覺器官把他人面部的刺激信號接收并傳遞到人的大腦之中，大腦就會進行人臉檢測、人臉圖像預處理、人臉特征提取等程序，然后，把以前存儲在大腦中的若干基本表情的人臉特征（即臉譜）提取出來，進行對比分析和模糊判斷，找出兩者的人臉特征最接近的某種基本表情。這時，大腦皮層就會接通該基本表情所對應的興奮區與邊緣系統的神經聯系，從而產生愉快或痛苦的情感體驗。同時，大腦皮層還會接通該基本表情所對應的興奮區與網狀結構的神經聯系，從而確定愉快或痛苦的強度。2、語言聲調的情感識別的邏輯程序。當人通過聽覺器

7、官把他人的語言聲調信號接收并傳遞到人的大腦之中，大腦就會對其時間構造、振幅構造、基頻構造和共振峰構造等方面的特點和分布規律進行檢測、預處理和特征提取，然后，把以前存儲在大腦中的若干基本表情的語言聲調信號的時間構造、振幅構造、基頻構造和共振峰構造等特征方面的構造特點和分布規律提取出來，進行對比分析和模糊判斷，找出兩者的聲音特征最接近的某種基本表情。這時，大腦皮層就會接通該基本表情所對應的興奮區與邊緣系統的神經聯系，從而產生愉快或痛苦的情感體驗。同時，大腦皮層還會接通該基本表情所對應的興奮區與網狀結構的神經聯系，從而確定愉快或痛苦的強度。3、語言文字的情感識別的邏輯程序。當人通過聽覺器官把他人的語言信號接收并傳遞到人腦中，或者通過視覺器官把文字信號接收并傳遞到人腦中，大腦就會對其進行語義分析，對它們所描述事物的價值關系的目標指向、變化方式、變化時態、對方的利益相關性等進行判斷，從而確定和選擇情感表達的某種基本模式。這時，大腦皮層就會接通該基本表情所對應的興奮區與邊緣系統的神經聯系，從