《電子技術應用》
您所在的位置:首頁 > 可編程邏輯 > 業界動態 > 基于仿生學和SoPC的嵌入式聲源定位器

基于仿生學和SoPC的嵌入式聲源定位器

2008-05-06
作者:梁志毅,高金山,董文杰

  摘 要: 論述了基于人體仿生學和嵌入式軟核的可編程片上系統SoPC的研究與實現。
  關鍵詞: 仿生學 SoPC 數字信號并行處理 嵌入式聲源定位" title="聲源定位">聲源定位器


  眾所周知,人的聽覺系統可以對所聽到的特定聲音來源進行定位。所謂的“雞尾酒會效應”[1]就是指人耳可以在一定的噪音背景下惟一地關注一個指定的聲音。結合嵌入式系統小巧靈活的特點和日益強大的功能,實現這樣的一種仿生聲源定位器" title="定位器">定位器,可以有效地對聽障人士的日常生活起到幫助作用,例如躲避突發的危險狀況、日常的人際交往等。更廣泛地看,這種系統可應用于機器人的聽覺系統、保安保密設施等諸多領域。
  為與基于ASIC技術的聲源定位器[2]區別,本文基于SoPC技術,在Altera的stratix系統平臺上,充分利用SoPC靈活的可重用設計特性和FPGA的信號并行處理能力,用一個MIC陣列,模擬人耳的聽覺系統,實現聲源定位器。并利用其良好的擴展性,進一步將系統從單CPU架構擴展至雙CPU架構,加入了語音識別" title="語音識別">語音識別的功能(本文只重點論述聲源定位的研究與實現)。
  在一個相對安靜的房間里對定位器進行測試,在5米的直徑范圍內,可以較準確地通過LCD輸出聲源的位置坐標。同時,對于簡單的短語,經過訓練之后,系統能夠在不超過1秒的時間內產生指定的響應,如在LCD上顯示相應的文字、振動器振動報警等。
1 人耳聽覺模型的基本原理
  在一個簡單的人耳聽覺系統模型中,聲源定位可以描述為:(1)從各種不同頻率的聲音中解析發現特定的聲音,如從一定的環境噪聲背景中找到特定聲源所發出的聲音。(2)獲得聲音到達MIC陣列的端點,即端點檢測" title="端點檢測">端點檢測。(3)聽覺系統根據聲音到達兩耳的時間差,判斷出聲源的方向和位置。
  根據上述人耳聽覺的機理,所設計的聲源定位器需要解決聲音的噪音過濾、端點檢測及方位距離算法等問題。
  (1)聲音的噪音過濾和端點檢測。對于噪音的簡單過濾和聲音的端點檢測,可以通過常用的“雙門限法”實現。
  本文利用Matlab下的Simulink作為原理驗證工具。驗證無誤后,將對應的FIR數字濾波器的階數和系數直接填入到Quartus II提供的FIR IP Core模塊中參數化,再在VHDL用戶模塊例化,即可完成FPGA中的語音信號預處理模塊的搭建工作。
  (2)聲源定位算法。系統中共使用了3個MIC,分別位于水平面上邊長為20cm的等邊三角形的三個頂點。借助于端點檢測,可獲取聲音到達各個MIC時對應的不同計數值n(對應有t=n/f,其中t為聲音傳播時間,f為采樣頻率),從而得到時延估計。經過前端的信號預處理工作,再充分利用聲源傳播中的先驗信息,基于空間幾何知識建立的算法模型,定位精度基本上達到了應用要求。MIC陣列擺放如圖1所示。


  因為該設備主要是針對聾啞人的語音輔助開發的,所以通常情況下聲源是與MIC陣列確定的平面共面或近似共面的。在近似共面的情形時,將數學模型擴展到三維的情況,即MIC陣列確定一個平面,而聲源不在該平面內。此時,以原點為中心,假設聲源位于一個橫截面直徑為3~10m的環狀空間中,且聲源到MIC陣列平面(橫截面)的垂直距離不超過±1m??沈炞C,聲源到原點的距離與聲源在MIC陣列平面投影點到原點的距離,二者偏差僅在4%左右。所以,為便于計算和構建模型,可以假設聲源與MIC陣列共面。
2 系統架構
  系統基本架構由Avalon Bus和兩個NIOS II CPU組成。NIOS II是基于哈佛結構的RISC通用嵌入式處理器軟核,能與用戶邏輯相結合。該處理器具有32位指令集、32位數據通道和可配置的指令及數據緩沖。本文選用標準型內核搭建系統。
  利用外圍ADC電路并通過IIS總線,三路" title="三路">三路MIC并行地將各自采集到的語音信號傳入AD Receiver模塊。該模塊是利用VHDL構建的用戶外設,用以橋接Avalon總線和ADC,同時完成三路語音信號的并行預處理。
  單路信號處理過程如下所述:
  將ADC傳入的串行信號轉換成16位的并行信號送入FIFO1。每一個并行信號即一個采樣點,定義每2 400個點為一幀,選取FIFO1容量為16bit×2560=5KB。存儲點數達到一幀后,將該幀逐點送入短時能量分析模塊、短時過零率分析模塊和FIFO2,計數器同時計數。FIFO2的容量與FIFO1相同。如果該幀沒有達到短時能量和過零率的閾值觸發要求,則該幀為無效幀;如果只達到過零率的觸發要求,則該幀為有效幀,暫時保留在FIFO2中,其后一幀若短時能量閾值觸發則回溯前一幀定位端點,否則兩幀都舍棄;如果某幀同時達到短時能量和過零率的觸發要求,則聲音起始端點即為該幀內部觸發過零率閾值的那一點。在這里,設置短時能量的觸發閾值EH為0.01,約為平穩狀態時能量值的5倍;短時過零率公式中修正閾值T為0.01,當短時過零率幅值發生大于3倍的突變時,則認為過零率閾值觸發。另外,為便于能量閾值觸發后的回溯查尋,設置了同樣為5KB的FIFO3、FIFO4,分別存儲短時過零率和短時能量的數據。
  將取得的聲音端點值傳至CPU1進行定位計算。CPU1利用Avalon總線與CPU2及系統其他模塊進行信息交換和處理。
  系統硬件結構如圖2、圖3所示。

?


  NIOS II提供了良好的系統擴展性和可編輯性,當系統引入語音識別功能使性能要求提高時,在不改變原有系統架構的基礎上,通過增加共享內存互斥鎖和共享內存,系統即可方便快速地擴展成為雙CPU架構。其中定義CPU1對前段采集的數據進行定位處理,將處理過的數據傳入CPU2,由CPU2完成識別及LCD顯示的功能,如圖3所示。
3 實驗
  在一個相對安靜的房間中對系統進行了測試。房間大小約為(8×6×3)m3,環境噪聲以持續的音樂模擬,約為40~50dB,待檢測聲音約為65~70dB。人發聲的位置在圖1所示的平面坐標系中選擇。
  圖4顯示了實驗中某個MIC的聲音預處理波形。聲音信號從左往右依次是你好、危險、早上好三句話,其中利用了223階的FIR線性濾波器實現信號處理功能,其窗函數為矩形窗。


  從圖4中可以明顯看出:因為背景音樂和說話前后的呼吸,原始聲音波形中出現明顯的干擾信號(背景噪音),但經過短時能量分析后,短時能量分析圖中的干擾部分已經被過濾掉。實驗證明,將短時能量分析與短時過零率結合,可以較好地檢測到聲音的端點。
  利用FPGA可并行處理的特性,實時監控三路MIC的聲音處理信號,比較各路聲音端點對應的不同n值,得出三個時間差,代入定位計算公式,從而定位聲源位置。
  本文論述了基于人體仿生學和NIOS II的聲源定位器。系統分為語音信號采集預處理和定位計算兩個基本部分及語音識別一個擴展部分。整個系統在實現過程中:
  (1)利用FPGA的并行特性實現了三路語音信號的并行采集和處理;
  (2)利用嵌入式的軟核NIOS II搭建了雙CPU結構。其中CPU1實現了對聲源定位的算法,CPU2實現了對語音識別及響應的功能;
  (3)利用NIOS II提供的硬件互斥鎖機制實現了CPU間的良好同步通信。
  從該系統的研究與實現中可以看到,SoPC的多核結構在低功耗、小面積、低成本的前提下提供了實現強大功能的可能。在聲源定位、語音識別的基礎上,結合語音合成技術,可為聾啞人提供更完善的幫助。而較高的性價比也將使這樣的系統進入更多更廣泛的生活工作應用領域。
參考文獻
1 Jie Huang,Ohnishi N,Sugie N.A Biomimetic System for Localization and Separation of Multi-ple Sound Sources.Instrumentation and Measure-ment.IEEE Transactions,1995;44(3)
2 Stanacevic M,Cauwenberghs G.Micorpower Gra-dient Flow Acoustic Localizer.Circuits and Sys-tems I:Regular Papers,IEEE Transactions on[seealso Circuits and Systems I:Fundamental Theory and Applications.IEEE Transactions,2005;52(10)
3 胡 航.語音信號處理.哈爾濱:哈爾濱工業大學出版社,2002
4 王炳錫,屈 丹,彭 煊.實用語音識別基礎.北京:國防工業出版社,2005
5 蔡蓮紅,黃德智,蔡 銳.現代語音技術基礎與應用.北京:清華大學出版社,2003

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          久久一区二区精品| 亚洲色无码播放| 欧美不卡一卡二卡免费版| 欧美有码在线观看视频| 在线精品一区| 欧美激情亚洲视频| 欧美性事在线| 一区二区三区精品在线| 欧美大尺度在线观看| 欧美日韩亚洲成人| 久热综合在线亚洲精品| 亚洲欧美色婷婷| 久久免费视频在线观看| 亚洲国产小视频在线观看| 国产精品日韩一区二区三区| 国产精品xxx在线观看www| 激情伊人五月天久久综合| 亚洲夫妻自拍| 亚洲国产精品一区二区尤物区| 亚洲成色777777女色窝| 久久影院亚洲| 亚洲人成在线观看网站高清| 国产精品免费区二区三区观看| 欧美激情一区二区三区不卡| 久久精品中文字幕一区二区三区| 欧美日韩另类在线| 小黄鸭视频精品导航| 裸体女人亚洲精品一区| 一区二区三区色| 国产精品自拍三区| 欧美精品在线免费观看| 欧美一区中文字幕| 欧美日韩一级黄| 美女啪啪无遮挡免费久久网站| 欧美一区二区三区四区在线观看地址| 在线视频精品一区| 亚洲人在线视频| 亚洲七七久久综合桃花剧情介绍| 欧美久久视频| 91久久香蕉国产日韩欧美9色| 国产欧美在线观看| 国产精品久久波多野结衣| 免费成人在线观看视频| 国产女人水真多18毛片18精品视频| 久久精品视频在线看| 国产精品二区三区四区| 亚洲福利视频专区| 欧美成人自拍视频| 亚洲在线免费观看| 国产精品黄色| 国产日韩精品视频一区二区三区| 午夜国产精品影院在线观看| 欧美搞黄网站| 午夜精品福利在线观看| 欧美大片18| 黄色亚洲精品| 一本久久精品一区二区| 国产亚洲综合在线| 欧美了一区在线观看| 国产精品久久一区二区三区| 91久久精品视频| 国产精品美女久久久久久免费| 亚洲欧美日本精品| 亚洲国产精品欧美一二99| 国产一区二区三区精品欧美日韩一区二区三区| 午夜精品久久久久久久99黑人| 国产精品久久久久一区二区三区共| 99视频精品在线| 国产一区二区三区视频在线观看| 美女精品一区| 久久嫩草精品久久久久| 韩国av一区二区三区四区| 欧美日韩在线播放三区| 欧美国产先锋| 久久精品99无色码中文字幕| 夜夜爽av福利精品导航| 一本一本久久| 欧美在线国产| 亚洲欧美在线观看| 亚洲每日更新| 一区在线观看视频| 国产亚洲视频在线观看| 欧美与黑人午夜性猛交久久久| 国产精品va在线播放我和闺蜜| 免费欧美电影| 欧美在线3区| 久久久免费精品| 欧美激情综合网| 国产一区av在线| 欧美不卡在线| 老司机午夜精品视频在线观看| 欧美日韩免费区域视频在线观看| 国产精品裸体一区二区三区| 亚洲欧美在线播放| 欧美一区免费| 欧美另类一区| 欧美韩日精品| 欧美视频一区二区| 国产欧美精品一区aⅴ影院| 国产精品久久久久永久免费观看| 欧美日韩一区二区三区免费看| 欧美激情中文字幕乱码免费| 亚洲综合二区| 久久日韩精品| 日韩一级视频免费观看在线| 国产日韩精品在线观看| 亚洲一级网站| 国产女精品视频网站免费| 91久久精品国产91久久性色| 韩曰欧美视频免费观看| 欧美母乳在线| 韩国av一区二区| 久久久久久九九九九| 欧美一区二区三区播放老司机| 欧美午夜精品理论片a级按摩| 国产精品久久久久久av下载红粉| 亚洲高清免费| 亚洲欧美日韩国产成人精品影院| 欧美高清免费| 国产欧美日韩亚洲一区二区三区| 欧美日韩免费视频| 欧美色视频日本高清在线观看| 欧美色欧美亚洲另类七区| 久久av在线| 国产精品实拍| 久久久久99精品国产片| 激情欧美丁香| 欧美亚洲动漫精品| 亚洲高清精品中出| 国产一区二区福利| 欧美一区免费视频| 欧美视频在线免费| 欧美亚州在线观看| 国产一区在线播放| 黄色一区二区在线| 在线亚洲激情| 亚洲综合欧美日韩| 欧美在线视频网站| 亚洲人体1000| 国产一区视频网站| 在线精品亚洲| 一区二区久久| 性做久久久久久免费观看欧美| 一区二区三区欧美激情| 在线成人亚洲| 亚洲一区在线视频| 国产免费一区二区三区香蕉精| 欧美日韩在线大尺度| 一本色道久久精品| 国产无遮挡一区二区三区毛片日本| 亚洲第一级黄色片| 久久成人免费网| 国产欧美日韩亚洲一区二区三区| 国产精品久久国产愉拍| 亚洲国产99精品国自产| 午夜精品久久久99热福利| 一本色道久久加勒比88综合| 亚洲欧美日本精品| 伊人久久久大香线蕉综合直播| 国产在线拍揄自揄视频不卡99| 国产精品久久久久久久久免费樱桃| 国产精品久久久久久久久久妞妞| 国产精品久久777777毛茸茸| 亚洲天堂成人| 欧美看片网站| 国内外成人免费视频| 国产精品久久久久久久久借妻| 欧美一级艳片视频免费观看| 国产精品一区一区三区| 欧美福利电影在线观看| 欧美主播一区二区三区| 久久久99国产精品免费| 欧美调教视频| 欧美视频在线免费| 欧美精品在线视频观看| 欧美亚州一区二区三区| 国内外成人免费视频| 欧美大片在线观看一区二区| av成人免费| 国产有码在线一区二区视频| 欧美成人免费va影院高清| 一区二区三区欧美成人| 欧美性一二三区| 久久久蜜桃一区二区人| 国产精品一区二区在线观看| 亚洲福利国产精品| 亚洲美女视频网| 国产精品欧美日韩一区| 欧美日韩一区视频| 国产精品三级久久久久久电影| 欧美在线免费一级片| 先锋影音一区二区三区| 一本色道久久综合狠狠躁的推荐| 国产欧美日韩免费| 亚洲激情在线激情| 国产视频一区在线观看一区免费| 国产欧美综合在线| 欧美精品自拍偷拍动漫精品| 亚洲第一精品在线| 韩国女主播一区| 亚洲精品国精品久久99热| 国产欧美日韩综合一区在线观看| 激情成人综合网| 国产区在线观看成人精品| 亚洲欧美一区二区三区在线| 在线精品一区| 亚洲高清免费在线| 亚洲国产第一页| 久久精品av麻豆的观看方式| 国产精品视频导航| 午夜性色一区二区三区免费视频| 久久久久久久性| 亚洲影视在线| 六月婷婷久久| 性色av一区二区三区红粉影视| 欧美在线视频一区二区| 国产精品久久久爽爽爽麻豆色哟哟| 国产欧美一区二区在线观看| 亚洲综合电影| 一区二区三区国产精品| 亚洲国产综合91精品麻豆| 亚洲第一区中文99精品| 欧美性猛交xxxx乱大交蜜桃| 国产精品美女视频网站| 国产欧美一区二区白浆黑人| 欧美美女福利视频| 久久国产精品网站| 国模吧视频一区| 在线性视频日韩欧美| 欧美亚洲免费高清在线观看| 亚洲久久在线| 国产精品一区二区久久久久| 国精品一区二区三区| 尤物yw午夜国产精品视频| 欧美精品日韩三级| 国产一区二区剧情av在线| 亚洲欧美精品| 欧美国产另类| 欧美激情在线播放| 国产精品久99| 在线视频免费在线观看一区二区| 亚洲黄色小视频| 国产精品免费看久久久香蕉| 亚洲一区二区三区在线观看视频| 亚洲国产黄色片| 国产日韩一区二区三区在线播放| 免费的成人av| 99热这里只有成人精品国产| 国产精品久久久一区麻豆最新章节| 有码中文亚洲精品| 国产综合色精品一区二区三区| 亚洲一区二区三区777| 久久av一区二区三区亚洲| 日韩午夜电影在线观看| 欧美a级大片| 国产精品一区二区女厕厕| 国产亚洲视频在线观看| 欧美成人高清视频| 亚洲精一区二区三区| 一区二区三区欧美在线| 欧美午夜精品久久久久久孕妇| 在线视频你懂得一区二区三区| 亚洲欧洲一二三| 欧美久久久久中文字幕| 1024成人网色www| 亚洲一区二区免费看| 一本久道久久综合狠狠爱| 欧美激情在线播放| 久久影院亚洲| 伊人久久大香线| 你懂的国产精品| 亚洲一区成人| 欧美69wwwcom| 国产一区二区三区高清在线观看| 一本色道久久88亚洲综合88| 欧美无乱码久久久免费午夜一区| 亚洲一区二区三区中文字幕在线| 国产日韩欧美91| 欧美精品首页| 欧美亚洲成人免费| 久久午夜色播影院免费高清| 日韩视频在线播放| 国产精品久久久久一区二区三区共| 亚洲国产美女精品久久久久∴| 久久国产精品久久精品国产| 欧美亚洲色图校园春色| 免费在线国产精品| 欧美日韩高清在线一区| 亚洲欧美日韩综合aⅴ视频| 欧美无乱码久久久免费午夜一区| 韩日精品视频| 欧美精彩视频一区二区三区| 国产午夜精品在线| 亚洲一品av免费观看| 国产在线播精品第三| 国产在线精品自拍| 99视频一区| 国产欧美一区二区三区久久人妖| 亚洲人体大胆视频| 久久精品一区二区| 欧美剧在线免费观看网站| 国产精品成人aaaaa网站| 亚洲无线一线二线三线区别av| 亚洲人成网站777色婷婷| 欧美日韩三区| 欧美日韩国产成人高清视频| 99在线观看免费视频精品观看| 欧美日韩另类国产亚洲欧美一级| 欧美日韩精品二区| 影音先锋在线一区| 99re6这里只有精品视频在线观看| 亚洲永久网站| 国语自产精品视频在线看一大j8| 国产欧美精品在线| 亚洲免费一在线| 国产精品欧美日韩久久| 在线不卡亚洲| 午夜精品久久| 亚洲精品在线一区二区| 日韩午夜中文字幕| 99精品国产99久久久久久福利| 一本色道**综合亚洲精品蜜桃冫| 亚洲欧美成人精品| 亚洲女同精品视频| 男男成人高潮片免费网站| 国产三级欧美三级日产三级99| 欧美成人有码| 亚洲色无码播放|