边云协同下的低时延任务处理技术研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:Linda_724
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着物联网时代的到来以及计算机的广泛使用,各种应用和服务使得人们的生活品质愈发地提高,人们的生活愈发便捷化。但与此同时,随着数据量的爆发式增加,大量带宽资源被占用,特别是作为服务中心的云计算设备,容易在高峰期出现链路拥堵的情况。并且随着人们对服务质量QOS的不断提高以及智能应用例如自动驾驶的不断发展,传统云计算所提供的延时性渐渐无法满足需求,这时将部分计算放入边缘计算设备已成为了热点并被运营商等特别是物联网提供商所研究,而边云协同场景下低延时任务处理算法的研究就显得尤为重要。本文旨在研究一种基于强化学习的边云协同场景下的任务处理技术研究。受限于硬件资源,本文主要选择在自己设计的仿真系统上进行研究。同时在确保了设计的仿真系统的仿真有效性情况下,以及符合真实场景需求下,确保本文设计的算法具有较好的可执行性,并且可以根据真实环境不同的硬件配置,从而适用于大部分边云协同的场景。本文首先在ifogsim的基础上提出了一种可以用于预测瓶颈并且适用于资源调度仿真的系统,该系统很好地继承了ifogsim中事件驱动的核心机制,通过事件的形式使各个组件解耦化,使得系统的可扩展性和模块程度都大大提高,同时为了使仿真系统模拟出来的曲线更拟合真实曲线,本文基于梯度下降以及马尔可夫过程的理论,实现了自动调参功能,从而取得了良好的仿真效果。在此基础上,本文利用这个系统设计了较为复杂的边云协同的场景,并在这个场景中基于策略梯度的方法设计了适用于边云协同场景的任务处理方法,并取得了良好的调度效果。综上,本文的创新点如下所示,第一,在ifogsim的基础上,使用java完好的复现了ifogsim的核心功能,并将其移植到python环境中,并提供了一种可以预测瓶颈和用于算法研究的仿真平台。第二,在这个系统上,以梯度下降算法为基础设计了自动调参系统,该算法由java语言实现。第三,本文在复杂的边云协同场景下,以策略梯度为基础,提出了适用于该场景的强化学习任务处理算法,并取得了良好的低延时调度效果。
其他文献
网络功能虚拟化(Network Function Virtualization,NFV)借助虚拟化技术将网络中特定功能进行软硬件解耦合,使原有网络功能被运行在通用硬件上的虚拟网络功能(Virtual Network Function,VNF)所替代。在NFV带来的新的服务架构下,网络服务可靠性的考量变得更加复杂。冗余备份是一种常见而有效的提高系统可靠性的方法。现有的冗余备份研究存在以下局限性:一些
随着互联网和信息技术的飞速发展,网络安全问题凸显,网络安全态势的感知、评估和预测已成为网络安全领域至关重要的研究方向。传统的网络安全态势呈现要素赋值方法包括自然赋值法和人工赋值法两种,存在着计算量巨大和人为因素影响的问题,进而导致态势评估值受到影响,最终影响态势预测结果。传统的网络安全态势预测方法通常需要大规模数据训练,对缺失数据非常敏感,预测方法缺乏理论支撑和推理过程,预测效率低下且收敛速度慢,
随着科学技术的飞速发展,现代社会对通信网提出了更新、更高的要求;可靠、方便快捷、个性化的全方位的通信服务,俨然已经成为了当前社会各界、人民群众的重要需求。为全面迎接5G时代的来临,中国移动加大投资力度,在全国主要城市抢先实施相关配套工程,建设具有中国特色的信息传输高速公路,为中国移动5G通信的实现进行铺垫。中国移动四川天府新区分公司积极响应上级单位的号召和相关指示,在我市核心区域、政府、高校及商业
软件定义网络(SDN)是一种将控制平面和数据平面相分离的新型网络架构,其对下层设备的集中控制特性,相比传统网络具有独特的优势。在传统的IP网络中,跨域路由主要依靠一些分布式路由协议来实现,例如边界网关协议(BGP)等。然而传统路由协议由于其完全分布式的特性存在诸多限制,无法对网络进行精确的控制,策略的部署也较为繁琐。而对于SDN网络来说,由于控制器提供了一个集中式的全局控制平面,相比传统IP网络下
近年来,传统媒体面对新媒体冲击,在技术创新方面要紧跟时代,内部面对制作的海量数据、员工的灵活办公等需求,四川广播对制播体系信息化改革建设意愿强烈。新的系统将与互联网有更多的接触,将带来严峻的信息安全问题,随着《中华人民共和国网络安全法》的推出实施,信息化建设中的网络安全问题上升到一个新高度。制播系统是整个广播系统的核心板块,制作、编排、管理、播出一系列工作的承担者。随着业务的复杂和需求,老旧的单机
在网络通信技术高速发展的趋势下,如何突破硬件通信协议的限制,将通信扩展到更广泛的领域中成为了备受瞩目的研究方向。其中CCIX(Cache Coherent Interconnect for Accelerators)规范协议为下一代云计算、人工智能、大数据、数据库和其他数据中心基础设施提供高性能、低延迟的通信互联。CCIX的一致性协议可通过PCIe链路传递,而PCIe作为一种应用于各类通信平台的高
网络功能虚拟化(Network Function Virtualization,NFV)采用虚拟化技术为网络服务的设计、部署和管理提供了一种新型的途径。NFV旨在提供支持完全独立于硬件的基础设施所需的网络功能。当用户需要多个网络功能服务时,这些网络功能可以构成一条网络功能服务链。NFV技术能将链上的网络功能(如防火墙,代理等)实例化到服务器上,从而使得这些服务器可以被方便地放置在数据中心以及分布式
针对攻击数据难于获取和攻击行为难以检测的问题,攻击仿真与测试已成为网络安全的研究热点。攻击测试是利用渗透工具对目标系统发起攻击,主动分析其弱点和技术缺陷。在众多的渗透工具中,普遍存在自动化程度低、扫描效率低、模块操作复杂、仿真攻击种类少、攻击目标模糊的问题,最终导致仿真及测试效果不佳。针对当前的问题,综合渗透技术、分布式技术、Kafka消息系统、路径优化算法等,实现了一个网络攻击仿真平台,为网络检
随着计算机视觉的不断发展,计算机视觉四大基础任务之一的目标检测成为了热点研究方向之一。目标检测旨在让计算机能够拥有自动的识别图像中目标的类别与位置的能力,其在自动驾驶、人脸检测、智能安防等领域都有着不可或缺的作用。因此大量的研究者都开始着力于提高目标检测的检测性能与检测速度。近年来,利用深度卷积神经网络进行目标检测的方法取得了重大进展。主流的目标检测算法根据检测算法的流程可以分为以速度为优势的一阶
本文站在中小规模云服务供应商的角度,提出通过向亚马逊等大厂商租赁服务器来搭建分布式云服务平台的可能性。不同于传统的云服务提供商自建数据中心,通过租赁计算资源来构建数据中心可以大大降低云服务厂商的初期成本。本平台为用户提供服务功能链的部署服务,并收取费用。通过将不同类型的网络功能按需排列,就构成了一条服务功能链。为有需求的客户提供服务功能链是一个不容忽视的市场。针对这一新的平台模型,本文从三个方面进