光纤坐席管理系统海量数据自动调度技术研究
|
摘要
传统算法不能根据系统运行内存变化及时扩充数据带宽的横、纵向流量上限。为解决此问题,提出基于多路径调度控制的光纤坐席管理系统海量数据自动调度方法。通过Python技术分析系统特点,并在Django框架的支持下,对运行接口和数据库类型进行选择,确定坐席光纤管理系统运行环境;在此基础上,引入多路径调度控制协议,根据数据流情况确定总吞吐量,利用MPTCP编码形式分析吞吐量的承载上限,确定自动调度技术优化流程,完成数据的自动调度。实验结果表明,改进调度技术与传统调度技术相比,其调度时的数据流横向上限扩充了140 M,纵向上限扩充了135 M,调度速度提高,具有一定的研究价值。
The traditional algorithm can not expand the horizontal and vertical traffic upper limit of data bandwidth in time according to the memory changes of the system.To solve this problem,an automatic scheduling method for massive data in optical fiber seat management system based on multi-path scheduling control is proposed.The Python technology is used to analyze the characteristics of the system,and under the support of the Django framework,the operation interface and database type are selected to determine the running environment of the seat fiber management system.On this basis,the multipath scheduling control protocol is introduced to determine the total throughput according to the data flow situation and analyze the throughput using the MPTCP coding form.The upper limit of load is determined,the automatic scheduling technology optimization process is determined,and the data automatic scheduling is completed.The experimental results show that,compared with the traditional scheduling technology,the horizontal upper limit of the data flow in the scheduling is extended by 140 M,the upper limit of the longitudinal direction is extended by 135 M,and the speed of the scheduling is improved,which has a certain value of research.
The traditional algorithm can not expand the horizontal and vertical traffic upper limit of data bandwidth in time according to the memory changes of the system.To solve this problem,an automatic scheduling method for massive data in optical fiber seat management system based on multi-path scheduling control is proposed.The Python technology is used to analyze the characteristics of the system,and under the support of the Django framework,the operation interface and database type are selected to determine the running environment of the seat fiber management system.On this basis,the multipath scheduling control protocol is introduced to determine the total throughput according to the data flow situation and analyze the throughput using the MPTCP coding form.The upper limit of load is determined,the automatic scheduling technology optimization process is determined,and the data automatic scheduling is completed.The experimental results show that,compared with the traditional scheduling technology,the horizontal upper limit of the data flow in the scheduling is extended by 140 M,the upper limit of the longitudinal direction is extended by 135 M,and the speed of the scheduling is improved,which has a certain value of research.
引文
[1] 王玮,苏琦,刘荫,周伟,等.一种基于小型Hadoop集群的数据分层调度处理算法研究[J].电子设计工程,2017,25(14):55-58.
[2] 孙三山,汪帅,樊自甫.软件定义网络架构下基于流调度代价的数据中心网络拥塞控制路由算法[J].计算机应用,2016,36(7):1784-1788.
[3] 徐迭石,刘胜辉,马超,等.大数据环境下MES作业计划与调度能力云服务化研究[J].计算机工程与科学,2016,38(4):624-633.
[4] 马子泰,曹健,姚艳.云环境下使用竞价实例并考虑中间数据存储策略的工作流调度方法[J].计算机集成制造系统,2017,23(5):983-992.
[5] 孙春蕾,温向明,路兆铭,等.能源互联网下基于储能调度及多源供能的数据中心能效优化[J].计算机研究与发展,2017,54(4):703-710.
[6] 侯昉,陆寄远,黄承慧,等.多维数据的Z-Ordering存储映射算法及其缓存调度优化[J].计算机工程与科学,2016,38(5):877-884.
[7] 张洋,李文明,叶笑春,等.LFF:一种面向大数据应用的众核处理器访存公平性调度机制[J].高技术通讯,2017,27(2):103-111.
[8] 钱江峰,刘庆程,喻乐,等.面向多级电网调度运行的多业务培训仿真系统(二)基于数据、信号、控制的通信策略设计[J].电力系统自动化,2017,41(14):159-163.
[9] 方堃,茹乐,于云龙,等.优先级调度下的无人机自组网数据可靠传输跨层方法[J].小型微型计算机系统,2017,38(5):1028-1033.
[10] 王越峰,王溪波,WANGYue-feng,等.Hadoop集群环境下集成抢占式调度策略的本地性调度算法设计[J].计算机科学,2017,44(1):567-570.
[11] 谢旭,施磊,张哲,等.面向多级电网调度运行的多业务培训仿真系统(一)系统设计与实现[J].电力系统自动化,2017,41(13):100-105.
[12] 霍雪松,裴培.基于调度数据网络技术的调度控制系统地区互备通信模式研究[J].电网与清洁能源,2016,32(5):747-750.
[13] 张跃驰,刘本希,罗彬,等.基于PSD-BPA的电网运行方式数据自动整合与调整方法[J].电力系统自动化,2017,41(1):102-108.
[14] 丁明,刘新宇,解蛟龙,等.面向提高风电接纳能力的多区域热-电联合调度模型[J].中国电机工程学报,2017,37(14):4079-4088.
[15] 石磊,丁雷道,陶永才,等.异构环境下作业时间感知的MapReduce调度策略[J].小型微型计算机系统,2017,38(8):1757-1761.
[16] 叶爱民,周铀,王金生,等.基于GIS的电力智能高效可视化定位调度系统研究与实现[J].自动化与仪器仪表,2017,(9):151-152.
[2] 孙三山,汪帅,樊自甫.软件定义网络架构下基于流调度代价的数据中心网络拥塞控制路由算法[J].计算机应用,2016,36(7):1784-1788.
[3] 徐迭石,刘胜辉,马超,等.大数据环境下MES作业计划与调度能力云服务化研究[J].计算机工程与科学,2016,38(4):624-633.
[4] 马子泰,曹健,姚艳.云环境下使用竞价实例并考虑中间数据存储策略的工作流调度方法[J].计算机集成制造系统,2017,23(5):983-992.
[5] 孙春蕾,温向明,路兆铭,等.能源互联网下基于储能调度及多源供能的数据中心能效优化[J].计算机研究与发展,2017,54(4):703-710.
[6] 侯昉,陆寄远,黄承慧,等.多维数据的Z-Ordering存储映射算法及其缓存调度优化[J].计算机工程与科学,2016,38(5):877-884.
[7] 张洋,李文明,叶笑春,等.LFF:一种面向大数据应用的众核处理器访存公平性调度机制[J].高技术通讯,2017,27(2):103-111.
[8] 钱江峰,刘庆程,喻乐,等.面向多级电网调度运行的多业务培训仿真系统(二)基于数据、信号、控制的通信策略设计[J].电力系统自动化,2017,41(14):159-163.
[9] 方堃,茹乐,于云龙,等.优先级调度下的无人机自组网数据可靠传输跨层方法[J].小型微型计算机系统,2017,38(5):1028-1033.
[10] 王越峰,王溪波,WANGYue-feng,等.Hadoop集群环境下集成抢占式调度策略的本地性调度算法设计[J].计算机科学,2017,44(1):567-570.
[11] 谢旭,施磊,张哲,等.面向多级电网调度运行的多业务培训仿真系统(一)系统设计与实现[J].电力系统自动化,2017,41(13):100-105.
[12] 霍雪松,裴培.基于调度数据网络技术的调度控制系统地区互备通信模式研究[J].电网与清洁能源,2016,32(5):747-750.
[13] 张跃驰,刘本希,罗彬,等.基于PSD-BPA的电网运行方式数据自动整合与调整方法[J].电力系统自动化,2017,41(1):102-108.
[14] 丁明,刘新宇,解蛟龙,等.面向提高风电接纳能力的多区域热-电联合调度模型[J].中国电机工程学报,2017,37(14):4079-4088.
[15] 石磊,丁雷道,陶永才,等.异构环境下作业时间感知的MapReduce调度策略[J].小型微型计算机系统,2017,38(8):1757-1761.
[16] 叶爱民,周铀,王金生,等.基于GIS的电力智能高效可视化定位调度系统研究与实现[J].自动化与仪器仪表,2017,(9):151-152.