《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 業界動態 > EMG在語音信號識別中的應用

EMG在語音信號識別中的應用

2008-10-23
作者:戴立梅 姚曉東 王 蓓 鄒

  摘 要: 提出使用肌電信號的語音識別" title="語音識別">語音識別系統。研究證實從面部肌肉中提取的肌電信號存在語音信息。實驗使用(0~9)十個數字,受試者每隔10s重復單詞。講話時用電極記錄五個通道表面肌" title="表面肌">表面肌電信號。用短時傅里葉變換" title="短時傅里葉變換">短時傅里葉變換提取信號的特征量,并通過主成分分析" title="主成分分析">主成分分析降維,有效地提取特征量進行模式識別。分類錯誤范圍在15%以下。實驗表明表面肌電信號的語音識別系統有著極好的前景。
  關鍵詞: EMG信號 語音識別 短時傅里葉變換 模式識別 生物信號處理


  肌電圖EMG(electromyography)是研究或檢測肌肉生物電活動,借以判斷神經肌肉系統機能及形態學變化,并有助于神經肌肉系統的研究或提供臨床診斷的科學。肌電信號(EMG)發源于作為中樞神經一部分脊髓中的運動神經元,是電極所接觸到的許多運動單元發放的動作電位的總和,反映了神經肌肉的活動、功能狀態[1]。表面肌電信號是從人體骨骼肌表面通過電極記錄下來的神經肌肉活動發放的生物電信號。肌電信號不僅在臨床醫學、運動學等領域被廣泛應用,而且研究證實肌肉關節內的生理肌電信號存在著相應的語音信息[2~3]。不同的肌肉運動模式是由不同的肌群收縮產生的,其所伴隨的表面肌電信號是不同的。而發音時肌肉對應著不同的運動模式,完全有可能從不同的表面肌電信號特征中找到對應的肌肉動作模式。隨著信號處理方法和計算機技術的發展,如何從生理肌電信號中識別出語音信號,已引起越來越多人的關注。
  以前有些用肌電信號識別語音的研究,研究目的是使用肌電信號作為輸入來彌補語音信息。肌電語音識別系統與常規語音識別標準相比,識別準確度較差,但準確度遠高于隨便猜測的準確度。這表明在肌肉關節內的生理肌電信號存在著語音信息。語音識別中使用肌電信號的優點是能夠幫助發音障礙者交流;且信號不受聲音噪聲干擾;還有一些字在聲學上發音相似,但說話方式和嘴的位置不同,在表面肌電信號中信號的特征是有區別的。這意味著肌電信號能用來區別聽起來相似的字。Day[3]研究表明,識別準確度在聽起來相似和不相似的詞匯中保持相同。使用面部肌電信號的語音識別系統一個應用是幫助操作高性能飛機的飛行員,一旦系統識別出飛行員講的話,能使用信息控制設備,如顯示器、雷達、無線電通信和飛行導航,但飛行艙內是高噪聲的環境,聲學噪聲能掩蓋飛行員的所有口頭講話,嚴重降低了常規的語音識別系統的準確度和性能,在飛行艙內使用面部肌電信號能提高語音識別性能。
  本文使用表面肌電信號(EMG)的語音信號識別系統改善噪聲條件下的聲音性能或幫助發音障礙的人。有些人發音有障礙,但講話時面部肌肉與正常人有同樣的動作模式,這樣使用表面肌電信號能幫助這些發音障礙的人發出簡單的指令,用來交流。
1 原理和方法
  本研究只使用肌電信號的信息識別孤立的單詞、(0~9)十個數字。使用腦電圖儀EEG-1100K(electroencephalograph, EEG)采集肌電信號,采用雙極導聯模式,采樣頻率1000Hz。使用(0~9)十個單詞做試驗。在實驗中,受試者每10s重復詞匯表中的單詞,每個單詞重復10次。受試者以相似的方式重復講每個單詞,保持音量和語速最小變化。


  表面肌電信號從五組面部肌肉中采樣,五路信號如圖1所示。提肌口(LAI)、顴肌部分(ZYG)、頸闊肌(PLT)、壓板口(DAO)、二腹的前面腹部(ABD)。使用五對表面電極采集肌電信號,每個電極用電極膏改進電極—皮膚界面,降低電阻。參考電極放在鼻根部。圖2是部分數字(0~3)的五路肌電信號(通道LAI、ZYG、PLT、DAO、ABD)時序圖。
  肌電信號分析,首先對采集的信號進行預處理,端點檢測。再使用短時傅里葉變換(STFT)處理數據,提取特征量。通過主成分分析(PCA)減少這些特征集系數的維度。5個肌電通道每個都保留6個PCA系數,這樣一共有30個特征量。使用線性判別分析分類器分類(0~9)十個數字。表面肌電信號中語音識別系統的構成如圖3所示。


2 特征量提取
  肌電信號本質上是具有非平穩特性的生理電信號,時頻分析是研究非平穩信號的一種有效方法。該方法在時頻面上表述信號的時變特征,能夠更清晰地反映出信號的頻率特性隨時間的變化。本研究使用短時傅里葉變換方法對講不同詞的肌電信號進行分析,由于變換后特征向量" title="特征向量">特征向量的維度很高,為了成功的分類需要采用合適的降維方法,本文通過主成分分析PCA(Principal Component Analysis)減少這些特征集系數的維度。
2.1 短時傅里葉變換
  短時傅里葉變換基本原理:把信號劃分成許多小的時間間隔,分析每一個時間間隔,確定每個間隔存在的頻率,頻譜的總體表示頻譜在時間上的變化。
  信號s(t)短時傅里葉變換定義為:
  
2.2 主成分分析(PCA)
  主成分分析(PCA)是總結多變量分析屬性的方法,經常用于特征提取或數據壓縮上的線性變換。在統計模式識別方面,主成分分析提供降低維度的有效方式,有效地減少特征系數表示的數量[4]。PCA是把特征映射到特征向量上,保留那些最大的特征值。
  p維隨機向量x的n次采樣值構成樣本陣X(n×p),n個p維列向量zi構成矩陣Z,如式(1)。
  Z=XT=(z1 z2 … zp)    (1)
  式中 T=(t1 t2 … tp)為正交陣,其列向量ti為樣本方差矩陣的特征值λi所對應的單位特征向量,且有λ1≥λ2…≥λp,則z1,z2,…,zp分別為樣本陣X的第1主成分,第2主成分,…,第p主成分,而且主成分z1表達了x最主要的信息,z2表達了x次主要的信息,依次類推,前m個主成分一起表達x的主要特征。
3 特征分類
  對肌電信號中的語音識別來說,特征提取是基礎,有效地進行分類是關鍵。本文的模式識別分類采用線性判別分類LDA(linear discriminant analysis),分類(0~9)十個數字。
  線性判別分析,亦稱為Fisher線性判別,是較常用的方法[5]。Fisher準則函數就是為了發現使得樣本類間離散度和樣本類內離散度的比值最大的投影方向。即在一投影方向上,同一個類的樣本聚集在一起,而不同類的樣本相對比較分散。
  樣本類間離散度矩陣定義為:
  
  其中,μi是Ci類的均值,μ是所有樣本的均值,Pi是先驗概率。
  樣本類內離散度矩陣定義為:
  
  其中, Si=E[(x-μi)(x-μi)Tx∈Ci]投影后希望樣本類間離散度越大越好,而樣本類內離散度越小越好。因此,如果Sω是非奇異矩陣,最優的投影方向Wopt就是使得樣本類間離散度矩陣和樣本類內離散度矩陣的行列式比值最大的那些正交特征向量。因此,Fisher準則函數定義為:
  
  通過線性代數理論知,Wopt就是滿足等式SbWiiSwWi(i=1,2,…,m)的解,對應于矩陣Sw-1Sb較大的特征值λi的特征向量。
4 實驗與結論
  在實驗中,使用腦電圖儀(EEG-1100K),采用五對電極從面部肌肉同時采集五路肌電信號,受試者每10s講(0~9)十個數字,每個數字重復講十次。對采集的肌電信號首先預處理端點檢測,然后對采集的五路肌電信號分別作短時傅里葉變換,分析窗選用矩形窗,窗寬為1024點。提取短時傅里葉變換頻譜圖的結果矩陣,做主成分分析降低維度,構造特征矢量,輸入線性判別分析分類器進行識別。
  由于傅氏變換后特征向量的維度很高,為了成功地分類需要降低維度,通過主成分分析(PCA)減少特征集系數的維度。本文將不同數字的五路肌電信號的短時傅里葉變換的幅度矩陣進一步做主成分分析降維,構造相應數字的特征矢量,x=[o11,…,o16,…,o51,…,o56]。其中o11,…,o16是第一路信號降維后的主成分;o51,…,o56是第五路信號降維后的主成分。


  表1列出了實驗中(0~9)十個數字降維后ABD通道主成分的部分特征向量。從表1中的數據可以看出由信號傅里葉變換系數的幅度進行主成分分析,提取的特征量具有很好的分離性。
  本文線性模式分類采用基于fisher準則的線性判別分析分類器,對特征矢量分別計算類間散度、類內散度,尋求一最優投影方向。圖4表明了(0~9)十個數字分類后的散點圖。經過分類器的識別,對(0~9)十個數字的分類錯誤率在15%以下。


  通過實驗可以得到:短時傅里葉變換后再做主成分分析降維提取特征量,提取的特征穩定且易于識別。面部肌肉記錄的表面肌電信號實現語音信號語音識別,輔助發音障礙者交流。研究結果證明,對10個數字的詞匯使用肌電信號有較好的分類準確度。實驗表明用表面肌電信號提高常規的語音識別系統有著極好的前景。但是做使用肌電信號實現語音識別系統的可行性結論前,還需進一步研究。首先,必須研究擴展測試條件,如連續的語音、更少強調發音、講話速率的最小變化。生理上的變化也可能影響肌電信號。
參考文獻
1 王新德,湯曉芙,崔麗英等.神經病學(2)——神經系統臨床電生理學,人民軍醫出版社,2002
2 Morse,M.S., O′Brien, E.M. Research summary of a scheme to ascertain the availability of speech information in the myoelectric signals of neck and head muscles using surface electrodes.Computers in Biology and Medicine,1986;16(6):399~410
3 Day, S.H. (1990): Recognition of speech uti-lizing the myoelectric signals of neck muscles- An advanced study in the time domain, M.Sc.Thesis, Auburn University.
4 司風琪,洪軍,徐治皋.基于向量投影的數據 檢驗PCA方法.中國電機工程學報,2002;10
5 Richard O. Duda Peter E. Hart David G. stork著,李宏東, 姚天翔譯. 模式分類.北京:機械工業出版社,2003

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          韩国在线视频一区| 欧美a一区二区| 欧美精品一区二区三区久久久竹菊| 国产精品影片在线观看| 欧美成年网站| 欧美精品一区二区三区很污很色的| 亚洲欧美不卡| 韩国一区二区在线观看| 亚洲激情二区| 免费试看一区| 在线观看视频一区二区欧美日韩| 美女视频黄a大片欧美| 国内精品久久久久国产盗摄免费观看完整版| 美女图片一区二区| 久久久精品国产免大香伊| 精品动漫3d一区二区三区免费版| 免费在线观看日韩欧美| 国产亚洲精品久久飘花| 一区二区三区成人精品| 另类亚洲自拍| 中文网丁香综合网| 一级日韩一区在线观看| 欧美高清一区二区| 激情小说亚洲一区| 精东粉嫩av免费一区二区三区| 亚洲日本精品国产第一区| 久久精品日韩一区二区三区| 麻豆精品视频在线观看视频| 激情av一区| 欧美 日韩 国产一区二区在线视频| 欧美大片第1页| 激情欧美一区二区| 国产专区综合网| 韩日精品在线| 欧美影院在线播放| 欧美破处大片在线视频| 久久精品一区四区| 99re6这里只有精品| 嫩草国产精品入口| 有坂深雪在线一区| 亚洲精品国产精品国自产观看| 欧美日韩国产综合新一区| 欧美一区二区免费视频| 国产精品久久久久免费a∨大胸| 久久精品国产免费观看| 欧美成人中文字幕| 欧美v亚洲v综合ⅴ国产v| 亚洲欧美激情视频在线观看一区二区三区| 久久亚洲一区二区| 欧美日韩国产小视频| 欧美ed2k| 久久久久久久久久久成人| 亚洲精品五月天| 亚洲精品视频一区二区三区| 影音先锋成人资源站| 亚洲午夜视频在线观看| 亚洲人成网站影音先锋播放| 亚洲欧美另类久久久精品2019| 国产欧美日韩一区| 欧美在线网址| 亚洲自拍偷拍一区| 欧美亚洲一区| 亚洲国产日韩一级| 亚洲三级电影全部在线观看高清| 国产有码在线一区二区视频| 国产主播一区二区三区| 99在线视频精品| 欧美凹凸一区二区三区视频| 国产视频一区在线| 欧美视频在线一区二区三区| 欧美大片免费| 精品成人国产在线观看男人呻吟| 一本色道久久| 欧美日韩在线一二三| 亚洲欧美日韩一区二区三区在线| av成人免费在线观看| aⅴ色国产欧美| 国产精品伦子伦免费视频| 国产精品海角社区在线观看| 亚洲大胆女人| 一本大道久久a久久精品综合| 国产精品久久亚洲7777| 国产日韩精品一区观看| 国产精品亚洲不卡a| 国产精品夜夜嗨| 一区免费视频| 久久亚洲春色中文字幕久久久| 亚洲国产专区| 亚洲免费观看在线视频| 国产精品卡一卡二卡三| 欧美一区二区三区在线播放| 伊人久久亚洲热| 老司机免费视频久久| 99精品欧美| 亚洲国产成人不卡| 亚洲免费av片| 麻豆成人小视频| av不卡在线| 一区二区不卡在线视频 午夜欧美不卡在| 亚洲欧美日韩中文播放| 欧美人成在线视频| 一区二区在线视频播放| 欧美专区在线播放| 久久九九99视频| 国产日产精品一区二区三区四区的观看方式| 久久国产一区二区三区| 欧美一区二区三区视频免费| 国产精品日韩精品欧美在线| 美女黄色成人网| 久久综合久久综合久久| 欧美理论电影在线播放| 久久久精品一区| 美女脱光内衣内裤视频久久影院| 欧美日韩久久不卡| 中日韩美女免费视频网站在线观看| 久久综合九色99| 国产精品日韩在线观看| 影音先锋久久久| 午夜激情亚洲| 亚洲高清二区| 国产精品一区毛片| 亚洲影院在线观看| 亚洲三级影片| 欧美在线视频播放| 欧美国产日韩一区| 欧美一区2区视频在线观看| 国产精品一区二区三区观看| 久久精品夜夜夜夜久久| 国产精品久久久久国产精品日日| 国产精品卡一卡二| 欧美精品免费在线观看| 亚洲小说区图片区| 美女黄色成人网| 国产欧美日韩免费| 欧美一区二粉嫩精品国产一线天| 国产精品一二| 欧美丰满高潮xxxx喷水动漫| 欧美日本韩国一区| 亚洲欧美另类在线观看| 国产精品乱码一区二区三区| 在线观看精品视频| 亚洲国产综合在线看不卡| 99国产精品久久久久久久成人热| 午夜精品av| 国产真实乱子伦精品视频| 欧美一区二区在线| 亚洲一区二区在线| 国自产拍偷拍福利精品免费一| 亚洲人成高清| 国产欧美日韩在线观看| 正在播放欧美一区| 欧美成人中文字幕在线| 久久综合99re88久久爱| 欧美大胆a视频| 国产在线欧美日韩| 日韩性生活视频| 亚洲特级片在线| 亚洲国产一区二区精品专区| 美日韩免费视频| 亚洲国产精品激情在线观看| 亚洲午夜黄色| 免费观看成人鲁鲁鲁鲁鲁视频| 欧美精品一区三区在线观看| 免费在线日韩av| 国产精品综合色区在线观看| 欧美激情视频一区二区三区免费| 国产欧美日本| 1000部精品久久久久久久久| 欧美日韩视频免费播放| 国产综合久久久久久| 黄色影院成人| 国产自产v一区二区三区c| 国产专区精品视频| 亚洲免费一区二区| 欧美成人激情视频免费观看| 国产精品看片你懂得| 欧美少妇一区| 午夜精品电影| 亚洲国产日韩一区二区| 黄色av一区| 亚洲精品欧美日韩专区| 亚洲欧美日韩国产综合在线| 亚洲人成人99网站| 久久国产精品黑丝| 久久蜜桃精品| 国产日本欧美一区二区三区| 欧美精品三级| 国产一区二区黄色| 久久免费少妇高潮久久精品99| 久久一日本道色综合久久| 亚洲国产成人在线播放| 国产亚洲成av人片在线观看桃| 蜜臀va亚洲va欧美va天堂| 一区二区三区精品久久久| 男男成人高潮片免费网站| 久久精品国产77777蜜臀| 尤物网精品视频| 欧美不卡高清| 国产精品美腿一区在线看| 亚洲国产裸拍裸体视频在线观看乱了中文| 亚洲欧美日韩成人高清在线一区| 亚洲免费在线精品一区| 欧美伊人久久大香线蕉综合69| 久久精品在这里| 国产精品久久久久久影院8一贰佰| 欧美人妖另类| 亚洲区中文字幕| 国产精品一二三视频| 狠狠色丁香久久婷婷综合_中| 香蕉久久一区二区不卡无毒影院| 欧美一级精品大片| 国产欧美日韩精品a在线观看| 在线精品视频在线观看高清| 香蕉免费一区二区三区在线观看| 国产日韩欧美综合精品| 国产精品国色综合久久| 日韩午夜在线观看视频| 久久精品五月| 亚洲欧美日韩国产另类专区| 亚洲欧美国产精品va在线观看| 红桃视频亚洲| 亚洲高清不卡在线观看| 在线免费高清一区二区三区| 欧美伊人久久久久久午夜久久久久| 亚洲精品久久视频| 久久精品成人欧美大片古装| 亚洲麻豆视频| 国产精品久久久久国产a级| 欧美高清视频www夜色资源网| 亚洲老司机av| 国产一区深夜福利| 国产欧美激情| 精品99一区二区三区| 在线观看成人av电影| 亚洲欧美成人精品| 麻豆九一精品爱看视频在线观看免费| 国产一区三区三区| 久久久综合激的五月天| 久久综合伊人77777| 午夜精品在线观看| 亚洲最新在线| 亚洲小说欧美另类婷婷| 久久精品视频播放| 精品粉嫩aⅴ一区二区三区四区| 欧美人与性动交a欧美精品| 国产主播一区| 国产精品影片在线观看| 亚洲影院一区| 亚洲视频播放| 国产日韩欧美视频在线| 一区二区精品| 午夜精品久久一牛影视| 欧美中文在线视频| 免费日韩精品中文字幕视频在线| 一色屋精品视频免费看| 国产精品日韩欧美一区| 国产精品高潮呻吟久久| 国产精品久久久久久久久久久久久久| 日韩午夜黄色| 亚洲伊人色欲综合网| 国产精品日韩在线| 夜夜嗨av一区二区三区| 国产精品99久久久久久久vr| 国产午夜精品全部视频播放| 亚洲美女91| 亚洲国产精品一区二区尤物区| 午夜精彩国产免费不卡不顿大片| 国产一区视频网站| 久久综合网hezyo| 欧美人与性动交α欧美精品济南到| 美女被久久久| 欧美精品一区二区高清在线观看| 亚洲精品久久久久久久久久久久| 亚洲制服少妇| 亚洲看片网站| 国产欧美一区二区三区国产幕精品| 精品动漫一区| 欧美一区二区三区视频在线观看| 国产一区二区三区久久悠悠色av| 久久综合网色—综合色88| 欧美亚洲动漫精品| 国产精品日韩一区二区三区| 欧美久久久久久| 欧美少妇一区二区| 午夜精品在线看| 亚洲人成网在线播放| 揄拍成人国产精品视频| 欧美性猛片xxxx免费看久爱| 国产精品久久久一区麻豆最新章节| av成人免费观看| 蜜臀av性久久久久蜜臀aⅴ| 永久免费毛片在线播放不卡| 国产精品国产三级国产| 欧美日韩中文在线观看| 狠狠色综合播放一区二区| 欧美大片一区| 久久综合九色99| 欧美一级在线亚洲天堂| 久久精品99国产精品日本| 亚洲国产精品精华液网站| 国产午夜精品在线观看| 国产精品久久久久久久久久三级| 亚洲欧美国产va在线影院| 一区二区三区不卡视频在线观看| 亚洲人成毛片在线播放| 一区二区视频免费完整版观看| 久久国产日本精品| 久久精品国产欧美激情| 蜜桃精品一区二区三区| 中文精品视频一区二区在线观看| 国产精品一区在线观看| 伊人久久大香线蕉av超碰演员| 国产精品丝袜白浆摸在线| 欧美亚日韩国产aⅴ精品中极品| 欧美日韩日韩| 欧美日韩综合网| 亚洲欧美视频一区二区三区| 亚洲免费高清视频| 亚洲一区高清| 亚洲天堂av图片| 亚洲美女福利视频网站| 久久一区二区视频| 国产精品久久久久av免费| 极品日韩久久| 一本一本大道香蕉久在线精品| 欧美日韩综合视频网址| 欧美午夜一区二区| 亚洲精品美女在线观看播放|