基于强化学习的电动汽车换电调度策略研究

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:erdongzi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着生活水平的逐步提高,人们对环境的重视程度日益增加,在国家相关政策的大力推动下,电动汽车开始大规模普及。随之而来的高成本、续航里程不足和充电体验较差等问题也亟需解决。作为一种创新的商业化解决方案,电动汽车的换电模式逐渐成为研究热点,随之而来的换电基础设施短缺、利用率不均衡等现象也亟待解决,使换电模式能源补充快的优势得以充分发挥。本文借助掌握的相关知识,分析了行进中的电动汽车换电过程中存在的问题和制约换电等待时间的因素。利用智能交通系统中车辆与路侧单元、路侧单元与换电站之间的实时通信,针对行进中电动汽车换电调度问题进行分析。为提高换电站的利用率,减少电动汽车换电的等待时间,本文提出了一种基于强化学习的调度方案,并在该方案基础上进一步提出了一种双层可划分区域、面向智能体的换电调度策略。本文的研究主要包括以下两个方面:(1)提出了一种基于强化学习的电动汽车换电调度策略(Reinforcement Learning Based Electric Vehicle Battery Switch Strategy,RLBS):首先给出城市智能交通系统下的电动汽车换电调度环境模型,然后同时考虑换电站的利用率和电动汽车的换电等待时间两方面因素,并根据行进中电动汽车换电调度的移动性特点,设计了状态转移方案、奖励策略以及基于回溯最大奖励的价值函数更新机制。(2)在RLBS的基础上,进一步提出了一种双层可动态区域划分、基于强化学习的换电调度策略(Dynamic Area Division Battery Switch Strategy based on Reinforcement Learning,DABS):重新建立换电调度模型和区域划分模型,策略选择的目标从换电站转移到了换电区域,并根据模型重新设计了换电调度策略和区域划分策略进一步均衡换电站利用率和电动汽车的换电等待时间。最后,在ONE仿真平台上通过实验验证DABS不同参数取值对策略系统相关指标的影响,并通过与现有经典策略方案比较,对DABS进行评价。实验结果表明,本文所提出的DABS调度策略可以有效提高换电站的利用率,降低电动汽车换电的平均等待时间。
其他文献
近两年,伴随着移动互联网的大面积覆盖,我国进入移动互联网发展的巅峰时期,这在很大程度上推进了我国消费者在上网、娱乐、社交、消费等方面习惯的快速转变,市场发展节奏也在
近年来无人机技术在军事、民用等领域均取得了快速的发展,在电子侦察系统中,无人机由于具有体积小、机动性强、隐蔽性好等优点,得到了广泛的运用。随着无人机技术发展,多无人机协同作战是未来无人机作战方式的重要发展趋势,同时侦察无人机需要具有良好的侦察定位能力。因此,本文研究了基于定位的多无人机航迹规划技术,这对于提高定位性能、加快任务执行速度、增强作战效率有着十分重要的意义。本文主要研究内容如下:针对电子
图像或视频的隐私泄露事件成为近几年的热门话题,传统的模糊、像素化、图像加密、K-匿名等掩盖图像中身份信息的隐私保护方法,常常破坏图像中的其他敏感信息,例如性别、动作、年龄、表情等,极大地限制了隐私图像保留的可用性。然而,对于图像或视频的隐私保护往往需要权衡隐私图像的隐私性和可用性。随着生成模型的发展,出现了一些基于生成模型的隐私保护方法,如基于变分自编码的人脸重建替换方法、基于生成对抗网络(GAN
目的:应用Fibroscan弹力成像技术检测脂肪肝患者肝脏脂肪含量及肝脏硬度值,同时收集脂肪肝患者的一般临床资料和血清学指标,观察脂肪肝不同病情程度之间的差异,初步探讨脂肪肝的病情进展,积累一定的临床资料。方法:选择2017年12月至2018年11月在青海大学附属医院经腹部超声诊断为脂肪肝并符合入排标准的患者60例作为研究对象,并根据超声下严重程度分级分为轻度、中度和重度组,抽取同期的健康体检者5
近些年来,铅基压电陶瓷在电子元器件和通信技术等领域得到了很好地应用,但是,铅基压电陶瓷中的铅元素对自然环境和人类健康产生有害影响,所以迫使无铅压电陶瓷必须取代铅基陶瓷材料的应用。在无铅压电陶瓷中存在Bi0.5Na0.5TiO3(BNT)与BaTiO3(BT)基陶瓷这两种有望取代铅基陶瓷的候选材料,BNT基陶瓷一般在高场应变性能很好,但是其矫顽场比较高,BT基陶瓷在弱场下具有优秀压电性能,并且矫顽场
外部环境变化下,企业如何结合自身实际问题选对经营战略、制定可行的经营战略规划并保障战略实施,这是广大中小型科技公司普遍关心的问题。本文以W公司当前经营困难和今后发展瓶颈,作为为研究对象。首先通过PEST分析、市场及行业环境分析、竞争环境等外部环境分析得出机会和威胁,在阐述经营现状及经营问题之后,通过内部资源、公司能力、核心专长等内部环境分析得出优势和劣势。以SWOT矩阵方式呈现备选策略,通过定量战
苏云金芽胞杆菌(Bacillusthuringiensi,Bt)是一种广泛用于农业害虫生物防治的昆虫病原菌,而表达Bt杀虫蛋白的转基因抗虫棉是当前最为重要的防治棉铃虫害手段。由于棉铃虫对第
电梯是社会生产生活当中最为常见、常用的特种设备,随着物联网技术的不断迭代发展,电梯物联网平台的建设与完善成为政府监管部门、电梯企业和人民关注的焦点。在我国电梯物联网平台的建设起步阶段,更多的研究关注于技术的发展与突破。但随着平台的广泛应用及深入市场化发展,以用户为中心将是电梯物联网平台重点的建设方向。现阶段的电梯物联网平台是否能有效满足用户需求成为了值得思考的重要问题,如何评价电梯物联网的服务质量
我国2010年颁布《企业内部控制配套指引》,提出达到条件的上市公司要对外披露内部控制自我评价报告以及内部控制审计报告。次年,我国在境内外同时上市的公司首批按照指引规定进行相关披露;而后,沪深主板上市公司施行;深交所2015年发布指引要求深市中小板上市公司施行披露;2019年沪市科创板开始实施。我国上市公司内控审计及其披露逐步规范化,内控审计报告数量逐步增加,内部控制存在的问题也逐步在否定意见报告中
学位
我国城市内涝频发,社会与经济危害巨大。内涝远程监控系统是减少内涝危害的关键措施之一,但目前存在功能单一、使用难度和成本高等问题难以推广应用。本文建立城市内涝实时监测云服务系统,探索城市排水系统实时控制模型,研究排水系统实时控制,实现高效、使用简单和低成本的内涝管理,减少城市内涝灾害。以广州市某河涌流域为研究区域,建立城市内涝实时监测云服务系统,完成终端设备在监测点的现场安装和系统的运行调试。结果显