《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于體感交互的智能家居控制與監護系統
基于體感交互的智能家居控制與監護系統
2019年電子技術應用第6期
趙 琳1,方艷紅1,2,張紅英1,2,王學淵1
1.西南科技大學 信息工程學院,四川 綿陽621010;2.特殊環境機器人技術四川省重點實驗室,四川 綿陽621010
摘要: 為實現通過手勢對家居電器設備的控制,并對室內危險情況進行實時監測和報警,設計了基于體感交互的智能家居系統。該系統利用Kinect設備捕獲RGBD圖像信息,將識別出的手勢信息作為控制信號,通過ZigBee局域網對家居設備進行控制;同時對場景中可能出現的老人或小孩摔倒情況進行實時檢測判定,對危險情況報警。實驗結果表明,該系統能滿足通過手勢對家居設備進行控制的需求,并且對摔倒情況能進行檢測和報警。
中圖分類號: TN919.5;TP399
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.190091
中文引用格式: 趙琳,方艷紅,張紅英,等. 基于體感交互的智能家居控制與監護系統[J].電子技術應用,2019,45(6):101-103.
英文引用格式: Zhao Lin,Fang Yanhong,Zhang Hongying,et al. Smart home control and monitoring system based on somatosensory interaction[J]. Application of Electronic Technique,2019,45(6):101-103.
Smart home control and monitoring system based on somatosensory interaction
Zhao Lin1,Fang Yanhong1,2,Zhang Hongying1,2,Wang Xueyuan1
1.Faculty of Information Engineering,Southwest University of Science and Technology,Mianyang 621010,China; 2.Key Laboratory of Sichuan Province for Robot Technology Used for Special Environment,Mianyang 621010,China
Abstract: In order to realize the control of home appliances by gesture and real-time monitoring including alarming of indoor hazards,a smart home system based on somatosensory interaction is designed. The system captures RGBD image information by Kinect device, takes the recognized gesture information as control signal, and controls the household equipment through ZigBee LAN. At the same time, it detects the falls of the elderly or children in the scene in real time, and alarms the dangerous situation. The experimental results show that the system can meet the need of controlling the household equipment by gesture, and can detect and alarm the falling situation.
Key words : somatosensory interaction;gesture recognition;home control;fall detection

0 引言

    隨著科學技術的日益發展和社會的進步,人們對美好生活的需求日益增長,對生活質量也有越來越高的要求。人們的家電控制方式從最初的按下按鈕使開關閉合發展為紅外遙控,甚至到手機小程序應用。現今甚至可以進一步脫離手機應用程序,利用體感技術來實現對家居設備的控制[1]

    本文在現有的智能家居技術的理論基礎上[2-3],設計了一種基于體感交互的智能家居控制與監護系統,用戶可以通過簡單的手勢實現對家居設備的控制。對于有老人或小孩的家庭,當出現有人突然摔倒等危險情況時,系統會自動報警并且將現場實際情況發送給監護人。

1 系統整體結構設計

    系統主要由感知終端模塊、核心處理模塊和信號處理模塊組成,系統整體結構框圖如圖1所示。

jsj2-t1.gif

    由圖1可知,系統在感知終端獲取視頻圖像信息后,傳遞給核心處理模塊,在核心處理模塊中完成手勢判定和摔倒檢測,之后,一方面將檢測到的摔倒信息利用網絡發送到用戶預留的地址;另一方面將手勢識別信號通過串口發送給上位機微控單元(MCU),在ZigBee局域網中的下位機MCU接收上位機發出的控制信息,實現對電器設備的控制。

2 系統設計及實現

    系統的設計流程圖如圖2所示。

jsj2-t2.gif

    在圖2的系統設計流程中,感知終端采用Kinect傳感器實現信息采集;核心處理端依據骨骼關節點空間信息進行動作判定,并對動作做出響應;當用戶需要完成家居控制服務時,將信息傳輸給MCU,實現家居設備的控制,當發現危險情況時,通過網絡將信息發送給監護人。

2.1 信息采集

    系統的信息采集使用Kinect傳感器獲取人體20個骨骼節點信息,依據骨骼節點的三維位置信息創建對應人體骨架,對相應的人體骨架進行坐標定位。

2.2 信息處理

    信息處理包括實時對接收的數據進行手勢判定[4-6]和摔倒檢測[7-8]。

2.2.1 手勢判定

    Kinect傳感器的信息采集頻率是30幀/s,當連續30幀的右手骨骼點坐標變化超出閾值時,認為手勢發生并提取數據流,與模型對比完成分類。

    以右手骨骼點到脊柱骨骼點以及左右肩骨骼點的歐式距離作為手勢判別的特征數據,歐式距離計算公式為:

    jsj2-gs1.gif

式中,d為歐式距離數值大小,(x1,y1,z1)、(x2,y2,z2)分別為空間中任意兩點的三維坐標。

    對獲取的數據進行擬合得到待匹配序列。將待匹配序列與模板序列比對,當差值在閾值范圍內則匹配到當前模板,完成手勢分類。

    系統中預先定義了兩個模板,每個模板保存有右手骨骼點到左右肩以及脊柱關節點的距離,定義了e1、e2、e3、e4、e5、e6用于保存待匹配序列與模板序列骨骼點相對距離的誤差,計算公式為:

    jsj2-gs2.gif

其中,E為右手骨骼點到左右肩節點或脊柱節點的誤差,ai為模板中存放的某一骨骼點相對距離大小,bi為實時獲取的對應骨骼點相對距離大小。

    e1、e2、e3分別表示右手到模板一脊柱、左肩、右肩的距離誤差,e4、e5、e6分別表示右手到模板二脊柱、左肩、右肩的距離誤差,系統設定的誤差閾值(單位:m)分別為4、3、3、3、3、5。當有待匹配序列滿足某一模板設定的閾值條件時,認定該模板所代表的手勢發生。

2.2.2 摔倒檢測

    受文獻[7]和文獻[8]中利用加速度傳感器檢測摔倒的啟發,本文利用采集的骨骼點空間位置信息,在被監護者不佩戴任何儀器設備的情況下獲得其活動加速度數據。

    以脊柱中心骨骼點為例,根據基本物理運動學知識,加速度計算公式為:

    jsj2-gs3.gif

其中,at表示第t幀中骨骼點的加速度大小,xt+1、xt-1分別表示與前后幀骨骼點的變化量,Δt是采樣時間間隔,本文的采樣間隔時間是1/30 s。

    由于一些比較劇烈的運動可能會產生較大的加速度而導致誤判,因此本文進一步檢測關節的距離變化來提高檢測的準確性。整體的摔倒檢測實現流程如圖3所示。

jsj2-t3.gif

    由圖3可知,摔倒判定需同時滿足加速度超出閾值和骨骼距離小于閾值兩個判定條件。其中,骨骼距離是指髖骨和膝蓋在豎直方向上的相對位置。經過多次摔倒測試,本文設置的加速度閾值設定為0.05 m/s2,骨骼點距離閾值設定為0.5 m。

2.3 信息傳輸

    信息傳輸包括與移動端的遠程通信和與MCU的串口通信。

2.3.1 遠程通信

    當檢測到有摔倒情況發生后,通過網絡將報警信息和當前圖片信息發送到第三方云端服務器,服務器將信息發送到用戶手機端,使在外的家人能夠及時獲知危險情況,如圖4所示。

jsj2-t4.gif

2.3.2 串口通信

    當需要完成家居控制服務時,核心處理單元通過USB串口向MCU發送信息,MCU根據接收到的信息對家居電器進行判斷操作。

    系統使用CC2530作為微控單元MCU。CC2530是TI公司推出的一款芯片,里面包含了51單片機的內核與ZigBee技術。其中的ZigBee是一種短距離局域網無線通信技術,工作在2.4 GHz頻段,傳輸速率10 kb/s~250 kb/s,傳輸距離10~100 m[9],具有低功耗、低成本的特點[10]

    CC2530需要完成的信息處理分為上位機與下位機兩部分。上位機主要接收核心處理單元的數據信息,處理分析,通過局域網方式將信息傳送到下位機。下位機控制電器設備。圖5所示是用CC2530實現家居智能開關的設計流程。

jsj2-t5.gif

    在圖5所示的CC2530設計流程中,上位機協調器實時接收從串口發送來的字符,并通過ZigBee無線協議把字符發送到下位機終端,終端根據收到字符控制家電開關。

3 實驗及結果分析

    將系統硬件設備連接,其中Kinect設備通電并連接到PC,ZigBee協調器通過USB數據線連接到PC串口,對受控終端供電。在室內自然光條件下進行測試,依次打開上位機控制程序、手勢識別程序。工作區顯示ZigBee成功組網,Kinect攝像頭正常工作。進行兩組手勢控制測試,每組30次,結果記錄見表1。

jsj2-b1.gif

    如表1數據所示,兩組測試實驗的控制成功率分別為86.7%和80%,能夠滿足日常家居控制的設計需求。

    摔倒檢測實驗中,當出現有人異常摔倒情況時,系統提示“fall detection”,并將報警信息和當前圖像(如圖6所示)發送到監護人手機端。

jsj2-t6.gif

4 結束語

    本文介紹了基于體感交互的智能家居系統,該系統集智能家居控制、實時檢測危險狀況于一體,使用戶脫離了遙控器、手機APP等終端,只需通過手勢就可以控制家居設備;當家中有老人或小孩意外摔倒時,系統會自動檢測危險狀況并及時向監護人報警。系統采用Kinect作為信息采集設備,檢測范圍較大且不易受室內光線強度影響,即使在夜間光量不足的情況下也能使用。

參考文獻

[1] 傅大梅,倪瑛.基于Kinect的智能家居體感控制系統的研究與設計[J].價值工程,2016,35(32):166-168.

[2] 張嘉慶.淺析中國智能建筑中智能家居的現狀及未來[J].中國戰略新興產業,2018(4):47.

[3] 吳杰文,左宸羽,倪銀堂,等.智能家居的研究現狀綜述與展望[J].中國戰略新興產業,2017(16):6.

[4] 管珊珊.基于Kinect的手勢識別研究進展[C].中國計算機用戶協會網絡應用分會2018年第二十二屆網絡新技術與應用年會論文集,2018.

[5] 陳紅梅,賴重遠,張洋,等.基于深度數據的手勢識別研究進展[J].江漢大學學報(自然科學版),2018,46(2):101-108.

[6] 徐軍,劉春花,孟月霞,等.可穿戴手勢識別控制器[J].電子技術應用,2016,42(7):68-71,75.

[7] 彭亞平,賀乾格,柯希垚,等.一種基于加速度傳感器的摔倒檢測腰帶[J].電子測量技術,2018,41(11):117-120.

[8] 徐慧慧,楊淼,錢超瑜.基于三軸加速度傳感器的摔倒檢測系統[J].黑龍江科技信息,2017(6):76.

[9] 廖慧,陽序仁.基于CC2530的LED智能照明系統的設計與實現[J].電力電子技術,2018,52(11):33-35.

[10] 李建勇,李洋,劉雪梅.基于ZigBee的糧庫環境監控系統設計[J].電子技術應用,2016,42(1):65-67,71.



作者信息:

趙  琳1,方艷紅1,2,張紅英1,2,王學淵1

(1.西南科技大學 信息工程學院,四川 綿陽621010;2.特殊環境機器人技術四川省重點實驗室,四川 綿陽621010)

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          亚洲第一网站| 麻豆精品传媒视频| 午夜在线精品| 一本色道久久综合亚洲精品小说| 亚洲视频精品在线| 亚洲欧美日韩天堂一区二区| 国产精品久久久| 在线精品国精品国产尤物884a| 免费成人av在线看| 久久综合影视| 欧美日韩国产大片| 欧美日韩美女一区二区| 亚洲欧美日韩在线一区| 久久久久国产精品厨房| 欧美在线欧美在线| 欧美日本亚洲韩国国产| 欧美精品v国产精品v日韩精品| 欧美国产亚洲视频| 日韩一本二本av| 欧美美女操人视频| 欧美视频1区| 亚洲三级性片| 久久精品一区| 国产日韩精品在线| 精品动漫3d一区二区三区免费| 在线日韩一区二区| 国产一区二区三区网站| 国产精品一区二区三区久久久| 欧美日韩一级视频| 欧美国产在线电影| 国产一区在线视频| 久久婷婷色综合| 欧美乱妇高清无乱码| 亚洲欧美日韩国产综合精品二区| 欧美精品播放| 国产女人水真多18毛片18精品视频| 91久久一区二区| 黄色一区二区三区| 女同一区二区| 久久久女女女女999久久| 欧美视频你懂的| 欧美在线免费视频| 一区二区三区日韩欧美| 在线观看福利一区| 99精品国产99久久久久久福利| 国产在线国偷精品产拍免费yy| 亚洲第一页中文字幕| 国产精品国产三级国产专播品爱网| 午夜在线视频一区二区区别| 欧美日韩高清区| 久久全国免费视频| 久久国产精品高清| 亚洲一区不卡| 亚洲自拍偷拍福利| 国产午夜久久| 欧美成人亚洲| 亚洲欧美日韩国产综合精品二区| 久久久天天操| 一区在线影院| 欧美日韩视频一区二区三区| 91久久精品一区二区三区| 欧美在线欧美在线| 亚洲美女在线国产| 夜夜嗨av一区二区三区免费区| 欧美1区3d| 欧美视频精品在线观看| 日韩午夜精品视频| 日韩一区二区精品视频| 欧美日韩亚洲一区二| 国产精品日韩欧美| 欧美一二三区在线观看| 欧美成人免费全部观看天天性色| 日韩视频免费看| 欧美视频中文在线看| 一区二区免费在线视频| 久久久久久久久岛国免费| 91久久线看在观草草青青| aaa亚洲精品一二三区| 亚洲宅男天堂在线观看无病毒| 国产精品毛片高清在线完整版| 国产日韩欧美电影在线观看| 99热精品在线观看| 亚洲网站视频| 欧美一级理论性理论a| 欧美日韩aaaaa| 欧美精品九九99久久| 在线看欧美日韩| 久久精品视频亚洲| 国产欧美精品日韩| 欧美视频中文字幕在线| 日韩一级免费观看| 欧美不卡视频一区| 亚洲自拍偷拍一区| 国产精品久久久久aaaa樱花| 欧美成人午夜剧场免费观看| 国内精品一区二区三区| 亚洲精品视频免费观看| 欧美日韩国产二区| 国产亚洲精品一区二555| 欧美精品一区在线| 狠狠做深爱婷婷久久综合一区| 国产精品美女久久久久久2018| 中日韩在线视频| 久久精品一本久久99精品| 久久综合999| 最新亚洲电影| 最新国产の精品合集bt伙计| 国产一区二区精品久久99| 亚洲视频中文字幕| 麻豆av一区二区三区久久| 国产一区二区三区黄| 亚洲电影专区| 99精品欧美一区二区三区| 欧美日韩一区在线视频| 国产精品福利网站| 欧美在线免费播放| 亚洲欧洲精品一区二区精品久久久| 欧美成人午夜视频| 国产精品一卡二卡| 夜夜嗨av色一区二区不卡| 亚洲国产精品传媒在线观看| 狼人社综合社区| 久久黄色影院| 亚洲国产日本| 欧美sm重口味系列视频在线观看| 久久一区欧美| 欧美视频中文字幕| 欧美第一黄网免费网站| 国产亚洲日本欧美韩国| 欧美激情一区二区在线| 久久久一本精品99久久精品66| 亚洲国产精品高清久久久| 日韩视频免费| 国产婷婷色一区二区三区在线| 亚洲自拍16p| 伊人狠狠色丁香综合尤物| 黑丝一区二区三区| 国产日韩亚洲| 亚洲日韩视频| 欧美日韩中文字幕在线视频| 亚洲综合清纯丝袜自拍| 亚洲欧美福利一区二区| 亚洲一区国产一区| 亚洲免费视频观看| 亚洲欧美日韩在线不卡| 欧美中文字幕在线播放| 久久夜色精品国产亚洲aⅴ| 国内视频一区| 国产精品一区久久久久| 国产精品美女一区二区| 午夜精品一区二区三区在线播放| 欧美日韩成人免费| 国产精品网站在线播放| 国产精品成av人在线视午夜片| 久久大香伊蕉在人线观看热2| 国产亚洲综合在线| 欧美日韩亚洲系列| 国产欧美一区二区精品忘忧草| 亚洲一区二区三区国产| 久久国产毛片| 亚洲肉体裸体xxxx137| 亚洲大片一区二区三区| 欧美国产日韩一区二区在线观看| 国产主播一区二区| 欧美中日韩免费视频| 国产精品亚洲激情| 韩国欧美国产1区| 国产一区再线| 亚洲精选在线| 久久视频这里只有精品| 欧美精品一区二区在线播放| 在线一区二区三区四区五区| 久久亚洲私人国产精品va媚药| 欧美影院在线| 国产精品一二| 午夜精品久久久久久99热软件| 狠狠综合久久| 欧美日韩二区三区| 欧美成人免费全部| 久久综合九色综合久99| 欧美午夜精品久久久| 国产精品成人av性教育| 欧美日韩国产精品成人| 久久九九免费| 久久这里只精品最新地址| 欧美91视频| 久久影院午夜片一区| 亚洲成色777777女色窝| 噜噜爱69成人精品| 欧美日韩三级| 久久综合色播五月| 91久久综合亚洲鲁鲁五月天| 久久精品一区中文字幕| 国产精品对白刺激久久久| 午夜视频在线观看一区二区| 欧美日韩在线综合| 在线观看91精品国产麻豆| 欧美日韩亚洲精品内裤| 日韩午夜三级在线| 午夜欧美大尺度福利影院在线看| 国产情侣久久| 欧美α欧美αv大片| 亚洲精品日韩欧美| 在线观看欧美日本| 久久亚洲精品伦理| 国产欧美日韩在线观看| 久久国产成人| 亚洲精品一区二区在线| 狠狠色狠狠色综合人人| 亚洲三级毛片| 黄色成人在线免费| 欧美亚洲动漫精品| 欧美日韩综合不卡| 香蕉成人伊视频在线观看| 欧美午夜视频| 在线欧美视频| 国产精品美女在线观看| 国产精品毛片高清在线完整版| 免费成人在线观看视频| 欧美成年人网| 亚洲性感美女99在线| 午夜在线观看欧美| 亚洲一区二区三区精品视频| 亚洲欧美中日韩| 欧美www在线| 亚洲毛片视频| 国产日韩欧美中文| 国产主播喷水一区二区| 国产在线观看91精品一区| 亚洲一区二区在| 欧美视频一区二区| 国产精品jizz在线观看美国| 国产精品久久7| 国产精品一区二区三区成人| 日韩视频在线播放| 欧美福利专区| 欧美在线国产| 亚洲调教视频在线观看| 亚洲精品小视频在线观看| 亚洲美女视频在线免费观看| 欧美日韩在线一二三| 国产精品av免费在线观看| 女女同性女同一区二区三区91| 狠狠88综合久久久久综合网| 亚洲日本中文字幕免费在线不卡| 亚洲精品极品| 亚洲国产第一页| 久久久久久久精| 一区二区三区精品国产| 欧美日韩亚洲一区二区三区四区| 激情视频一区| 激情综合视频| 1769国内精品视频在线播放| 裸体歌舞表演一区二区| 亚洲欧美国产高清va在线播| 精品51国产黑色丝袜高跟鞋| 欧美专区日韩视频| 国产一区二区三区四区三区四| 亚洲精品视频一区| 一区二区三区偷拍| 久久精品亚洲一区二区| 免费在线看一区| 国产精品视频男人的天堂| 欧美色另类天堂2015| 国产精品国产亚洲精品看不卡15| 美女脱光内衣内裤视频久久影院| 亚洲欧美日韩区| 一色屋精品视频在线观看网站| 久久裸体艺术| 欧美久久久久免费| 精品51国产黑色丝袜高跟鞋| 欧美区二区三区| 久久精品观看| 欧美大秀在线观看| 亚洲国产成人在线播放| 久久人人九九| 欧美精品成人91久久久久久久| 久久理论片午夜琪琪电影网| 狠狠狠色丁香婷婷综合久久五月| 午夜精品成人在线| 狠狠色噜噜狠狠狠狠色吗综合| 国产欧美一区二区精品仙草咪| 欧美色视频一区| 国产精品美女一区二区| 久久久精品tv| 欧美揉bbbbb揉bbbbb| 一区二区三区国产在线观看| 欧美一区二区三区视频| 亚洲经典自拍| 国产欧美精品在线| 国产精品久久久久久影视| 欧美激情偷拍| 亚洲一区国产一区| 欧美区视频在线观看| 国产精品一区一区三区| 在线观看视频一区二区| 在线看无码的免费网站| 国产精品一香蕉国产线看观看| 在线成人h网| 在线免费精品视频| 久久福利视频导航| 国产视频久久久久久久| 一区二区亚洲| 欧美资源在线| 影音先锋中文字幕一区二区| 影音先锋亚洲一区| 亚洲片国产一区一级在线观看| 亚洲精品美女免费| 欧美久久久久久久久| 亚洲国产成人久久| 国产一区二区看久久| 国产日韩欧美在线播放| 欧美三级韩国三级日本三斤| 国产精品不卡在线| 亚洲精品亚洲人成人网| 欧美在线观看一二区| 国内精品久久久久久久97牛牛| 亚洲另类一区二区| 免费视频一区二区三区在线观看| 国产欧美一区二区三区国产幕精品| 欧美日精品一区视频| 欧美一区二区三区在线| 一区二区三区我不卡| 精久久久久久久久久久| 香蕉乱码成人久久天堂爱免费| 欧美成人精品三级在线观看| 久久久国产精彩视频美女艺术照福利| 午夜一区二区三视频在线观看|