《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 一種基于PPO算法的低空基站優化模型
一種基于PPO算法的低空基站優化模型
電子技術應用
薄云鵬1,2,亢抗3,潘桂新3,汪敏1
1.中國科學院云南天文臺;2.中國科學院大學;3.中國聯合網絡通信有限公司廣東省分公司
摘要: 通過優化現有地面網絡基站來實現低空網絡服務具有成本低、建設快等優點,面對低空基站優化過程中存在的無線環境復雜、配置參數多樣、優化目標互相影響等問題,提出了一種基于近端策略優化算法的多維低空網絡基站優化模型:通過射線追蹤技術計算不同類型、不同角度基站的低空覆蓋能力,并構建支持多目標優化和多參數配置的低空網絡基站優化模型,利用PPO算法得到基站配置策略。在仿真環境中進行訓練與結果驗證,證明該模型可有效生成基站優化方案,且相較于基于A2C方法的模型具有更快的收斂速度和更好的基站優化效果。
中圖分類號:TN929.5 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.256278
中文引用格式: 薄云鵬,亢抗,潘桂新,等. 一種基于PPO算法的低空基站優化模型[J]. 電子技術應用,2025,51(7):60-64.
英文引用格式: Bo Yunpeng,Kang Kang,Pan Guixin,et al. A low-altitude base station optimization model based on PPO algorithm[J]. Application of Electronic Technique,2025,51(7):60-64.
A low-altitude base station optimization model based on PPO algorithm
Bo Yunpeng1,2,Kang Kang3,Pan Guixin3,Wang Min1
1.Yunnan Observatories, Chinese Academy of Sciences;2.University of Chinese Academy of Sciences;3.China United Network Communications Co., Ltd., Guangdong Branch
Abstract: Optimizing existing terrestrial network base stations to provide low-altitude network services offers advantages such as cost-effectiveness and rapid deployment. Facing challenges in the optimization process of low-altitude base stations, including complex wireless environments, diverse configuration parameters, and interrelated optimization objectives, this paper proposes a multidimensional low-altitude network base station optimization model based on the Proximal Policy Optimization (PPO) algorithm. By employing ray tracing technology, the model calculates the low-altitude coverage capability of base stations with different types and angles. It constructs an optimization model that supports multiple objectives and parameter configurations for low-altitude network base stations. The PPO algorithm is utilized to derive base station configuration strategies, which are then trained and validated in a simulated environment. This demonstrates that the model can effectively generate optimization schemes for base stations and exhibits faster convergence speed and better optimization results compared to models based on the Actor-Critic (A2C) method.
Key words : low-altitude base station;low-altitude communication;PPO;reinforcement learning

引言

近年來,隨著低空經濟的發展,無人機的數量和應用急劇增加,無人機的通信需求也隨之快速擴張[1]。而傳統的基于地面站的無人機通信方式受地面站性能和所用的非授權頻段的限制,存在易受干擾、通信范圍受限、安全性差等問題,難以滿足新應用場景的需求,因此,人們認為利用蓬勃發展的5G及以上蜂窩網絡支持無人機通信是最有前途和成本效益的方法[2-6]。

然而,現有的蜂窩網絡以服務地面用戶為主[7],據此開展的網絡規劃和優化也主要面向地面目標,并且由于天線自身存在零位、旁瓣等問題,低空場景中信號覆蓋不全、鄰區關系雜亂、切換頻繁、信號干擾嚴重等現象極為突出,使得目前的蜂窩網絡難以滿足無人機低空通信的需要[2, 5, 8]。因此,亟需通過建立專門的低空網絡來開展對低空無人機應用場景的通信服務。

當前的低空通信組網方案主要有同站空地同頻組網、同站空地異頻組網、異站空地同頻組網、異站空地異頻組網等[2, 9],其中,同站組網方案通過在地面蜂窩網絡站址上對現有設備進行調整優化或新增少量AAU設備等方式實現低空網絡的建立,具有成本低、建設方便等優點。對于具體的低空網絡建設方案,已有很多關于低空基站的選址[10]以及對天線的仰角[11-12]的調整方面的研究,然而上述研究往往只聚焦于站址或仰角等單一配置的調整,對于實際應用中通過優化已有地面基站建立低空網絡過程中的對合適基站進行選擇以及對高度、天線角度、設備選型等多方面配置策略的聯合設計而言,其實用價值有限,需要設計一種多要素聯合的低空基站優化方法,實現低成本、高效率的低空網絡建設。

傳統的蜂窩網絡的基站規劃方法往往根據經驗模型估計信號的傳播,而已有研究證實,城市環境內的復雜建筑物的遮擋和反射會極大地改變空對地信道特性[13-15],因此統計性信道模型往往難以準確描述信道特征。而射線追蹤技術可通過計算無線電波與場景之間的電磁相互作用,模擬真實的信號傳播過程,具有更高的靈活性[15]。然而射線追蹤作為一種確定性傳播工具,其所需計算量往往遠大于統計性模型,因而在應用時需采取實時計算等措施降低計算量,提升效率。

強化學習是一種通過智能體與環境的交互來積累信息、改進策略的機器學習方法,該方法通過環境對智能體動作的反饋來進行智能體的訓練與學習,具有無需提前獲取先驗信息的優點。對低空基站優化問題而言,使用強化學習方法可免于提前進行各基站不同優化方案的覆蓋效果的繁雜計算,提升優化速度,降低計算量與時間成本。


本文詳細內容請下載:

http://www.cowatch.cn/resource/share/2000006596


作者信息:

薄云鵬1,2,亢抗3,潘桂新3,汪敏1

(1.中國科學院云南天文臺,云南 昆明 650200;

2.中國科學院大學,北京 100049;

3.中國聯合網絡通信有限公司廣東省分公司,廣東 廣州 510700)


Magazine.Subscription.jpg

此內容為AET網站原創,未經授權禁止轉載。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          国产精品一区二区三区成人| 欧美色欧美亚洲另类二区| 日韩视频免费大全中文字幕| 亚洲国产精品久久久久久女王| 久久av资源网| 国语自产精品视频在线看抢先版结局| 欧美精品videossex性护士| 久久精品视频在线免费观看| 久久久久久穴| 国产精品美女久久久久av超清| 亚洲精品一线二线三线无人区| 欧美成人精品高清在线播放| 亚洲高清久久| 欧美日韩国产色综合一二三四| 久久国产主播| 影音先锋中文字幕一区二区| 亚洲国产一区二区视频| 国产在线乱码一区二区三区| 欧美一区二区三区免费大片| 久久国产精品一区二区三区| 136国产福利精品导航网址| 亚洲国产日韩一区二区| 好吊妞**欧美| 亚洲欧美激情视频在线观看一区二区三区| 欧美一二区视频| 欧美精品日韩一本| 毛片一区二区| 国产麻豆成人精品| 国产欧美一区二区在线观看| 亚洲激情欧美| 亚洲第一精品夜夜躁人人爽| 一本久道久久综合中文字幕| 亚洲国产高清自拍| 亚洲一二三区在线观看| 一本久久a久久精品亚洲| 亚洲国产精品一区二区久| 红桃视频一区| 亚洲二区在线视频| 亚洲国产成人精品视频| 在线观看欧美| 欧美精品在线免费| 亚洲欧美在线播放| 久久综合色一综合色88| 国产欧美欧美| 国产精品海角社区在线观看| 国产视频在线观看一区二区三区| 韩国成人理伦片免费播放| 亚洲高清123| 国产日韩一区| 欧美日韩一区国产| 亚洲一区二区不卡免费| 欧美日韩免费| 国产一区二区高清| 国产精品激情偷乱一区二区∴| 蜜桃久久av一区| 国内精品亚洲| 欧美激情网站在线观看| 日韩视频免费观看高清在线视频| 亚洲最新合集| 欧美伦理91| 在线观看视频欧美| 欧美成人在线免费观看| 在线观看成人小视频| 欧美日韩国产色视频| 久久午夜国产精品| 亚洲一区二区三区在线观看视频| 午夜精品www| 欧美精品一区二区三区很污很色的| 国产综合18久久久久久| 性欧美在线看片a免费观看| 欧美色图麻豆| 欧美成人福利视频| 狂野欧美一区| 久久久欧美精品sm网站| 激情视频一区二区| 亚洲精品孕妇| 99视频精品全国免费| 在线看欧美日韩| 久久精品国产成人| 黑人巨大精品欧美黑白配亚洲| 在线欧美日韩| 麻豆91精品91久久久的内涵| 久久婷婷人人澡人人喊人人爽| 亚洲精品视频在线观看网站| 日韩午夜视频在线观看| 欧美日韩国产麻豆| 亚洲免费在线播放| 欧美一区精品| 国产日产高清欧美一区二区三区| 一本大道久久a久久精品综合| 99综合在线| 在线综合+亚洲+欧美中文字幕| 国产美女精品人人做人人爽| 欧美午夜电影一区| 国产精品一区二区男女羞羞无遮挡| 香蕉国产精品偷在线观看不卡| 亚洲国产日韩欧美在线图片| 国产精品久久久久久久久久免费| 久久精品久久综合| 欧美区视频在线观看| 亚洲欧洲精品天堂一级| 一区二区日韩欧美| 亚洲人成在线播放网站岛国| 国产亚洲精品久| 狠狠综合久久av一区二区老牛| 欧美精品午夜| 国产精品美女久久| 模特精品在线| 亚洲免费久久| 欧美日韩中文字幕日韩欧美| 国产亚洲一级高清| 欧美午夜宅男影院在线观看| 久久狠狠一本精品综合网| 国产精品chinese| 国产精品一二一区| 欧美一区二区三区四区视频| 国产精品美女一区二区在线观看| 欧美午夜视频在线观看| 在线亚洲国产精品网站| 99综合精品| 亚洲制服丝袜在线| 亚洲电影免费观看高清完整版在线| 亚洲国产1区| 美玉足脚交一区二区三区图片| 亚洲激情影视| 国产欧美视频一区二区三区| 你懂的网址国产 欧美| 国产精品高潮视频| 欧美大尺度在线观看| 国产精品xnxxcom| 亚洲午夜久久久久久久久电影网| 嫩草伊人久久精品少妇av杨幂| 国产精品美女主播| 亚洲午夜av| 国产精品视频观看| 精品99一区二区三区| 日韩视频在线一区| 久久精品91久久香蕉加勒比| 久久gogo国模裸体人体| 欧美主播一区二区三区| 欧美 日韩 国产精品免费观看| 国产精品亚洲美女av网站| 欧美极品色图| 国产精品成人一区二区艾草| 亚洲一区二区三区在线| 国产精品亚洲产品| 欧美在线视频免费| 亚洲精品一区二区三| 校园春色国产精品| 欧美顶级少妇做爰| 永久免费精品影视网站| 在线免费观看成人网| 欧美日韩第一区| 国产视频亚洲| 国产精品v欧美精品v日本精品动漫| 欧美在线地址| 欧美大胆a视频| 亚洲午夜精品一区二区| 国内精品免费午夜毛片| 国产精品久久毛片a| 久久免费视频网站| 亚洲免费伊人电影在线观看av| 久久aⅴ国产紧身牛仔裤| 久久久久久久久久看片| 欧美午夜不卡影院在线观看完整版免费| 欧美日韩视频免费播放| 欧美午夜在线视频| 性感少妇一区| 国产精品美女久久久免费| 亚洲七七久久综合桃花剧情介绍| 国产精品视区| 午夜精品久久久久久久99黑人| 国产日韩精品一区二区浪潮av| 欧美视频在线一区| 亚洲曰本av电影| 欧美三级视频在线观看| 亚洲免费婷婷| 亚洲国产精品日韩| 一区二区在线视频观看| 欧美系列电影免费观看| 在线精品视频一区二区| 9久草视频在线视频精品| 亚洲国产一区二区三区高清| 国产精品久久久久久模特| 午夜欧美精品久久久久久久| 亚洲自拍偷拍麻豆| 免费成人av资源网| av成人免费在线观看| 国产精品免费在线| 精品白丝av| 久久视频在线看| 中文在线不卡| 国产精品日韩欧美综合| 久久青草欧美一区二区三区| 亚洲大片精品永久免费| 亚洲视频在线免费观看| 在线观看精品视频| 老司机一区二区三区| 亚洲一级影院| 国产精品国产三级国产专区53| 一本色道久久综合一区| 久久成人精品无人区| 欧美人与禽性xxxxx杂性| 亚洲成人在线观看视频| 亚洲一区综合| 在线免费高清一区二区三区| 久久er99精品| 国产一区二区三区奇米久涩| 亚洲国产日韩一区| 欧美午夜片在线免费观看| 91久久国产精品91久久性色| 欧美一区二区成人| 久久国产精品网站| 国产精品视频九色porn| 亚洲国产精品女人久久久| 黄色在线一区| 亚洲高清免费视频| 国内精品久久久| 亚洲在线视频观看| 国内精品久久久久久久果冻传媒| 国产精品腿扒开做爽爽爽挤奶网站| 日韩视频亚洲视频| 国产亚洲人成a一在线v站| 亚洲欧洲综合另类在线| 欧美精品一区二区三区蜜桃| 亚洲免费一在线| 国产欧美精品在线| 国产精品久久久久久久第一福利| 国产主播一区| 亚洲日本aⅴ片在线观看香蕉| 欧美承认网站| 欧美午夜在线观看| 欧美三区视频| 久久国产精彩视频| 欧美在线观看www| 国产日韩亚洲| 这里只有精品视频在线| 伊人久久大香线| 影音先锋日韩资源| 欧美激情五月| 亚洲欧洲三级电影| 欧美精品日韩| 欧美一级欧美一级在线播放| 在线看欧美日韩| 夜夜嗨av一区二区三区免费区| 国产女精品视频网站免费| 亚洲视频一区在线观看| 亚洲电影免费观看高清完整版在线观看| 久久久av网站| 亚洲激情一区二区三区| 99精品国产福利在线观看免费| 怡红院av一区二区三区| 久久精品综合一区| 模特精品裸拍一区| 美女亚洲精品| 在线播放日韩专区| 欧美日韩综合另类| 欧美高清在线视频观看不卡| 久久综合色88| 一区二区三区三区在线| 日韩天天综合| 亚洲精品影院| 99视频精品全部免费在线| 国内揄拍国内精品久久| 亚洲国产成人精品女人久久久| 欧美午夜精品理论片a级大开眼界| 久久久久国产一区二区三区四区| 欧美日韩福利| 国产精品免费电影| 欧美精品乱码久久久久久按摩| 欧美激情精品久久久久久免费印度| 亚洲欧美偷拍卡通变态| 99国产精品| 久久久亚洲国产天美传媒修理工| 暖暖成人免费视频| 久久综合伊人77777| 男同欧美伦乱| 国产日韩精品视频一区二区三区| 亚洲私人影院在线观看| 亚洲精品色婷婷福利天堂| 欧美成人嫩草网站| 国产又爽又黄的激情精品视频| 国产麻豆精品theporn| 国产午夜精品理论片a级大结局| 免费亚洲婷婷| 欧美制服第一页| 欧美在线亚洲综合一区| 久久深夜福利| 国产精品99久久久久久有的能看| 国产精品日韩久久久久| 亚洲国产天堂久久综合| 亚洲欧美日韩系列| 在线不卡中文字幕播放| 国产亚洲日本欧美韩国| 欧美极品色图| 欧美激情2020午夜免费观看| 国产精品久久久久99| 一区二区三区.www| 一本色道久久综合亚洲精品小说| 日韩午夜高潮| 欧美日韩亚洲国产一区| 亚洲女同同性videoxma| 久久国产精品黑丝| 老司机aⅴ在线精品导航| 精品成人在线视频| 精品成人a区在线观看| 久久人体大胆视频| 国产欧美一区视频| 韩日精品在线| 国产精品99久久久久久久久久久久| 亚洲欧美在线播放| 国产精品卡一卡二| 在线观看免费视频综合| 99精品视频免费观看| 午夜精彩国产免费不卡不顿大片| 欧美精品电影在线| 久久岛国电影| 精品96久久久久久中文字幕无| 国产精品成人一区二区艾草| 国产精品国产自产拍高清av| 国产精品色网| 亚洲国产欧美一区二区三区久久| 欧美成人精品在线观看| 久久综合九色| 午夜精品福利视频| 国产精品久久久久免费a∨大胸| 欧美日韩亚洲一区二区三区四区| 免费一区视频|