《電子技術應用》
您所在的位置:首頁 > 其他 > 設計應用 > 面向移動邊緣計算基于強化學習的計算卸載算法
面向移動邊緣計算基于強化學習的計算卸載算法
2021年電子技術應用第2期
楊 戈1,2,張 衡1
1.北京師范大學珠海分校 智能多媒體技術重點實驗室,廣東 珠海519087; 2.北京大學深圳研究生院 深圳物聯網智能感知技術工程實驗室,廣東 深圳518055
摘要: 針對移動邊緣計算(Mobile Edge Computing,MEC)的計算卸載決策的問題,基于強化學習方法提出了一個在多用戶的MEC系統中的計算卸載決策算法(Offloading Decision algorithm based on Reinforcement Learning,ODRL)。ODRL算法根據任務模型、計算模型以及信道狀態對任務進行卸載決策,采用強化學習方法求解最優計算卸載策略。仿真結果證明了所提出的ODRL算法與基線策略相比,具有更低的系統總成本。
中圖分類號: TN911.22
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.200920
中文引用格式: 楊戈,張衡. 面向移動邊緣計算基于強化學習的計算卸載算法[J].電子技術應用,2021,47(2):36-40,48.
英文引用格式: Yang Ge,Zhang Heng. Offloading decision algorithm based on reinforcement learning for mobile edge computing[J]. Application of Electronic Technique,2021,47(2):36-40,48.
Offloading decision algorithm based on reinforcement learning for mobile edge computing
Yang Ge1,2,Zhang Heng1
1.Key Laboratory of Intelligent Multimedia Technology,Beijing Normal University(Zhuhai Campus),Zhuhai 519087,China; 2.Engineering Lab on Intelligent Perception for Internet of Things(ELIP),Shenzhen Graduate School, Peking University,Shenzhen 518055,China
Abstract: For the problem of computing offloading decision in mobile edge computing, this paper proposes an offloading decision algorithm based on enhanced learning in multiuser MEC system. According to the task model, calculation model and channel state, ODRL algorithm makes the task unloading decision and uses reinforcement learning method to solve the optimal computing unloading strategy. Simulation results show that the ODRL algorithm proposed in this paper has lower total system cost compared with the baseline strategy.
Key words : mobile edge computing;computing offloading;reinforcement learning;Q-learning

0 引言

    隨著萬物互聯趨勢不斷加深,網絡邊緣的智能終端設備不斷增加[1-10]。移動邊緣計算是為提升移動設備服務質量而提出的一種具有前景的新范式[11-20]。

    (1)以降低時延為優化目標

    文獻[3]將卸載決策歸結為兩種時間尺度下的隨機優化問題,并采用馬爾科夫決策過程來處理這個問題。通過分析每個任務的平均時延和設備的平均能耗,提出了一個能量約束的時延最小化問題,并設計了一個有效的一維搜索算法找到了最優的任務卸載策略。

    文獻[4]提出了一種低復雜度的漸近最優在線算法,該算法在每個時隙中通過封閉形式或二等分搜索獲得最優解,共同決定卸載決策、移動執行的CPU周期頻率和計算卸載的發射功率。

    文獻[5]提出了一種基于云的分層車輛邊緣計算(VEC)卸載框架,在該框架中引入了附近的備用計算服務器來彌補MEC服務器的不足計算資源。基于此框架,文獻采用斯塔克爾伯格博弈方法設計了一種最佳的多級卸載方案,該方案可以最大程度地利用車輛和計算服務器的效用。

    (2)以降低能耗為優化目標

    文獻[6]將卸載決策公式化為凸優化問題,用于在邊緣云計算能力無限和有限的兩種情況以及在計算等待時間的約束下最小化加權和移動能量消耗。文獻[7]對該方案做出了改進,相比前者降低了90%的能耗。

    (3)以權衡能耗和時延為目標

    文獻[8]分析了單用戶MEC系統的能耗延遲權衡問題,提出了一種基于Lyapunov優化的云卸載計劃方案以及云執行輸出的下載調度方案。在文獻[9]中擴展到了多用戶系統。

    文獻[10]研究了在多信道無線干擾環境下移動邊緣云計算的多用戶計算卸載問題。采用博弈論方法以分布式方式實現有效的計算卸載。




本文詳細內容請下載:http://www.cowatch.cn/resource/share/2000003370




作者信息:

楊  戈1,2,張  衡1

(1.北京師范大學珠海分校 智能多媒體技術重點實驗室,廣東 珠海519087;

2.北京大學深圳研究生院 深圳物聯網智能感知技術工程實驗室,廣東 深圳518055)

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          久久精品在线免费观看| 亚洲国产二区| 亚洲美女视频在线观看| 亚洲影音先锋| 亚洲黄网站在线观看| 久久超碰97人人做人人爱| 在线一区免费观看| 亚洲精品乱码久久久久久黑人| 免费av成人在线| 亚洲免费伊人电影在线观看av| 欧美精品久久一区| 国产色产综合产在线视频| 欧美在线免费观看亚洲| 欧美伊人久久大香线蕉综合69| 99精品99久久久久久宅男| 欧美成人官网二区| 国产一区二区三区免费不卡| 黄色成人免费观看| 亚洲欧美日韩国产中文在线| 国产精品亚洲综合色区韩国| 一本久久综合亚洲鲁鲁| 久久久国产精品一区二区三区| 久久激情婷婷| 欧美本精品男人aⅴ天堂| 亚洲美女福利视频网站| 香蕉精品999视频一区二区| 欧美日韩国产123区| 国产精品国产三级国产专播精品人| 久久精品中文字幕免费mv| 久久久久九九九九| 久久精品女人的天堂av| 免费欧美高清视频| 国产精品一区二区三区久久久| 欧美高清一区| 欲色影视综合吧| 亚洲看片免费| 亚洲一区二区三区免费在线观看| 欧美母乳在线| 亚洲欧美综合另类中字| 亚洲区第一页| 一区二区三区在线不卡| 影音先锋日韩资源| 亚洲线精品一区二区三区八戒| 国内精品久久国产| 久久人人超碰| 国产在线不卡精品| 麻豆精品传媒视频| 欧美日韩中字| 欧美日韩一区成人| 亚洲电影免费| 午夜精品久久久久久久蜜桃app| 久久aⅴ国产紧身牛仔裤| 1024国产精品| 日韩天堂在线观看| 久久久久网址| 欧美高清视频一区| 亚洲黄色成人| 亚洲欧美一区二区三区极速播放| 亚洲欧美在线看| 欧美日韩一区成人| 在线精品福利| 日韩午夜激情电影| 欧美日韩在线影院| 国产欧美日韩免费| 亚洲精品韩国| 一区二区三区在线不卡| 欧美一区二区三区视频免费播放| 久久久久久自在自线| 尤物精品国产第一福利三区| 欧美精品一区二区精品网| 激情丁香综合| 99国产精品久久久久老师| 欧美一区二区三区日韩视频| 韩国一区二区三区在线观看| 亚洲欧美在线一区二区| 国产一区二区三区网站| 欧美精品免费看| 欧美日韩国产大片| 欧美成人a∨高清免费观看| 欧美日韩国产综合视频在线观看中文| 亚洲一区二区三区777| 国产亚洲精品成人av久久ww| 欧美在线日韩| 亚洲免费影院| 亚洲欧美国产高清va在线播| 国产精品99一区| 欧美日韩国产一区| 久久亚洲色图| 99视频在线精品国自产拍免费观看| 亚洲一区二区免费| 欧美无砖砖区免费| 欧美色图首页| 亚洲日本中文字幕| 欧美在线资源| 好吊一区二区三区| 亚洲精品美女在线| 日韩五码在线| 亚洲国产aⅴ天堂久久| 一区二区三区在线不卡| 亚洲欧美日韩国产成人| 午夜视频精品| 亚洲国产成人精品久久| 久久精品成人一区二区三区蜜臀| 欧美日韩的一区二区| 亚洲第一福利视频| 国产在线观看精品一区二区三区| 欧美理论片在线观看| 亚洲欧美国产精品专区久久| 一区二区视频在线观看| 国产综合久久久久影院| 免费人成精品欧美精品| 另类欧美日韩国产在线| 免费91麻豆精品国产自产在线观看| 午夜一区二区三视频在线观看| 久久国产精品亚洲77777| 亚洲免费在线电影| 老司机凹凸av亚洲导航| 亚洲精品乱码视频| 久久久久久久综合色一本| 免费亚洲网站| 韩国一区二区在线观看| 欧美在线91| 国产亚洲欧美一区| 亚洲免费电影在线观看| 亚洲激情小视频| 亚洲福利视频在线| 国产精品视频免费在线观看| 一区二区三区国产精华| 欧美成人免费va影院高清| 伊人成年综合电影网| 国产精品制服诱惑| 久久久噜久噜久久综合| 久久婷婷一区| 亚洲无吗在线| 国产精品人人做人人爽| 国产欧美三级| 欧美在线首页| 久久精品日韩| 一区二区三区四区五区视频| 欧美日韩精品免费看| 亚洲欧美在线网| 国产日韩欧美精品一区| 午夜精品999| 久久免费少妇高潮久久精品99| 免费的成人av| 国内精品嫩模av私拍在线观看| 欧美专区日韩视频| 老司机成人网| 国产精品成人在线观看| 国产精品一页| 免费视频亚洲| 欧美在线啊v| 欧美一区二区三区四区在线观看| 一区二区三区在线免费播放| 欧美精品91| 欧美在线一区二区三区| 黄色在线一区| 美腿丝袜亚洲色图| 在线观看视频亚洲| 国产精品剧情在线亚洲| 久久人人97超碰精品888| 欧美高清视频在线| 亚洲国产天堂久久综合| 欧美国产精品劲爆| 久久激五月天综合精品| 久久国产精品99精品国产| 国产精品美腿一区在线看| 亚洲欧美国产制服动漫| 国产精品无码永久免费888| 午夜在线视频一区二区区别| 亚洲欧美日韩精品一区二区| 国产精品第一页第二页第三页| 亚洲一区二区三区乱码aⅴ| 亚洲欧美日韩中文在线制服| 久久久久久91香蕉国产| 亚洲国产小视频在线观看| 亚洲欧洲日本在线| 欧美成人在线免费视频| 久久婷婷国产麻豆91天堂| 黄色av日韩| 一区二区亚洲欧洲国产日韩| 国产亚洲综合精品| 亚洲午夜精品一区二区三区他趣| 亚洲视频1区2区| 亚洲日韩成人| 狠狠入ady亚洲精品| 国产一级精品aaaaa看| 欧美日韩精品三区| 久久一区激情| 日韩一区二区精品葵司在线| 尤物精品国产第一福利三区| 亚洲日本理论电影| 国产欧美日韩在线| 久久久精品一品道一区| 欧美日韩在线看| 欧美三级午夜理伦三级中文幕| 欧美国产欧美亚州国产日韩mv天天看完整| 国产精品麻豆成人av电影艾秋| 国产精品午夜久久| 国产精品国产| 亚洲精品国产精品乱码不99| 免费亚洲一区| 另类春色校园亚洲| 欧美中文字幕在线播放| 欧美日韩一区二区免费视频| 久久久精品日韩欧美| 国产美女扒开尿口久久久| 久久一区二区三区国产精品| 国产精品视频网| 亚洲日本欧美天堂| 一区二区精品国产| 美女脱光内衣内裤视频久久网站| 欧美片在线播放| 国色天香一区二区| 欧美二区在线观看| 国产精品白丝黑袜喷水久久久| 亚洲专区国产精品| 久久久亚洲成人| 国产在线视频不卡二| 欧美亚洲免费高清在线观看| 国产日产亚洲精品系列| 国产精品性做久久久久久| 99精品热视频只有精品10| 国产亚洲制服色| 久久婷婷国产综合精品青草| 亚洲看片一区| 欧美aⅴ一区二区三区视频| 欧美日本免费| 国产精品区一区| 久久精品中文| 激情欧美亚洲| 国产女主播一区| 黑人操亚洲美女惩罚| 久久久久国产精品麻豆ai换脸| 欧美区二区三区| 欧美午夜精品久久久久久久| 一区二区三区在线视频观看| 国产精品国产馆在线真实露脸| 久久久不卡网国产精品一区| 久久久免费精品视频| 国产一区二区电影在线观看| 亚洲欧美久久| 欧美日韩亚洲网| 国产日本欧美一区二区三区在线| 欧美日韩国产一区二区三区地区| 欧美亚洲成人免费| 亚洲人人精品| 亚洲欧美欧美一区二区三区| 久久久久久一区二区三区| 国内外成人免费激情在线视频网站| 欧美日韩亚洲综合一区| 亚洲伊人伊色伊影伊综合网| 亚洲美女av在线播放| 欧美日韩在线一区二区三区| 久久综合精品国产一区二区三区| 久久亚洲国产成人| 国产精品美女久久久久久免费| 亚洲福利视频三区| 一区二区三区视频在线| 免费观看亚洲视频大全| 欧美暴力喷水在线| 欧美在线一级视频| 欧美日韩国产一区二区三区地区| 欧美不卡一卡二卡免费版| 久久久久久一区二区三区| 亚洲国产色一区| 国产目拍亚洲精品99久久精品| 在线亚洲免费视频| 免费一级欧美片在线播放| 亚洲制服丝袜在线| 在线免费日韩片| 亚洲欧美视频一区二区三区| 欧美日韩视频| 欧美在线播放高清精品| 亚洲国产精品一区二区三区| 国产婷婷色一区二区三区四区| 亚洲精品在线免费观看视频| 亚洲福利视频网站| 久久精品夜色噜噜亚洲a∨| 亚洲精品中文字幕在线| 欧美日韩精品一区二区三区| 午夜精品久久久久久久| 亚洲国产成人在线| 亚洲国产精品视频一区| 国产女主播在线一区二区| 国内精品视频久久| 欧美日韩另类一区| 亚洲伦理在线免费看| 国产亚洲一区精品| 红桃视频欧美| 亚洲黄色在线观看| 亚洲免费久久| 香蕉久久精品日日躁夜夜躁| 亚洲高清不卡在线观看| 欧美精品一区二区三区很污很色的| 激情五月婷婷综合| 美国十次了思思久久精品导航| 欧美日韩在线视频首页| 亚洲男人影院| 亚洲精品一区二区三区99| 9久re热视频在线精品| 午夜视频久久久久久| 女同性一区二区三区人了人一| 欧美激情中文字幕乱码免费| 国产精品久久久久久久久久妞妞| 欧美日韩国产欧| 亚洲图片欧美一区| 欧美国产视频一区二区| 国产精品啊v在线| 国产精品乱码人人做人人爱| 欧美韩国一区| 欧美成在线观看| 久久国产福利| 久久蜜桃精品| 中文一区在线| 韩国一区电影| 亚洲精品在线免费观看视频| 亚洲七七久久综合桃花剧情介绍| 国产精品二区三区四区| 欧美一级成年大片在线观看| 国内成+人亚洲+欧美+综合在线| 国产精品黄视频| 久久成年人视频| 国产精品男gay被猛男狂揉视频| 亚洲一区二区三区国产| 国产精品热久久久久夜色精品三区| 国产精品女人久久久久久| 国产精品网站在线|