网络大数据的分层调度技术研究Research on hierarchical scheduling technology for network big data
杨军
摘要(Abstract)：
网络环境下的大数据已经成为数据传输的主要信息载体,大数据使用方式的多样化需要对网络大数据进行多维度的调度调用。传统网络大数据的调度技术能够简单地对网络大数据进行调度,但在目前高维度网络环境下很难进行分层次分维度的调用。针对上述问题,提出网络大数据的分层调度技术。在网络环境下设置多维度分层调度结构,通过网络多维度分层实现高精度的大数据调用。通过实验分析结果可以看出,提出的网络大数据的分层调度技术能够在网络环境下对大数据进行高精度的分层调度。
关键词(KeyWords)： 网络环境;大数据调用;多维度调用;分层调度;调度结构;数据传输
基金项目(Foundation):
作者(Author): 杨军
DOI: 10.16652/j.issn.1004-373x.2018.04.044
参考文献(References)：
- [1]伊鹏,刘洪,胡宇翔.一种可扩展的软件定义数据中心网络流调度策略[J].电子与信息学报,2017,39(4):825-831.YI Peng,LIU Hong,HU Yuxiang.A scalable traffic scheduling policy for software defined data center network[J].Journal of electronics&information technology,2017,39(4):825-831.
- [2]万聪,王翠荣,王聪.面向数据密集型工作流的Qo S-aware调度算法[J].系统仿真学报,2016,28(3):549-558.WAN Cong,WANG Cuirong,WANG Cong.Qo S-aware scheduling for data intensive workflow[J].Journal of system simulation,2016,28(3):549-558.
- [3]刘鑫,张瑜.电力网络系统中统计特征任务分层的大数据融合模型[J].电网与清洁能源,2015,31(8):36-39.LIU Xin,ZHANG Yu.Fusion model of the hierarchical big data of characteristics task in electric power network system[J].Power system&clean energy,2015,31(8):36-39.
- [4]蒋本立,张小平.大数据网络的均衡调度平台设计与改进[J].现代电子技术,2016,39(6):62-65.JIANG Benli,ZHANG Xiaoping.Design and improvement of balanced scheduling platform for big data network[J].Modern electronics technique,2016,39(6):62-65.
- [5]刘迷.云计算下虚拟信息资源大数据特征集成调度[J].科技通报,2015,31(10):199-201.LIU Mi.Integrated scheduling of virtual information resources in data characteristics of cloud computing[J].Bulletin of science and technology,2015,31(10):199-201.
- [6]邹志洪.基于大数据的教育趋势化推导模型设计与实现[J].现代电子技术,2017,40(16):66-68.ZOU Zhihong.Design and implementation of educational tendency derivation model based on large data[J].Modern electronics technique,2017,40(16):66-68.
- [7]蒋苏蓉,蓝江桥,杨玉海.Hadoop框架下的情报分析大数据调度超时预测方法[J].计算机科学,2014,41(z1):409-413.JIANG Surong,LAN Jiangqiao,YANG Yuhai.Timeout prediction of the schedule method for big data of the intelligence analysis based on Hadoop[J].Computer science,2014,41(S1):409-413.
- [8]桂勋,LIU Yilu,郑永康,等.基于大数据技术的北美FNET/Grid Eye系统设计与实现[J].电力系统自动化,2017,41(10):112-116.GUI Xun,LIU Yilu,ZHENG Yongkang,et al.Design and implementation of North America FNET/Grid Eye system based on big data technology[J].Automation of electric power systems,2017,41(10):112-116.
- [9]张慧萍,贺红艳,陈小娟.大数据的分层分类优化识别仿真研究[J].计算机仿真,2015,32(10):463-466.ZHANG Huiping,HE Hongyan,CHEN Xiaojuan.Simulation of optimum identification in hierarchical classification of big data[J].Computer simulation,2015,32(10):463-466.
- [10]任凯,邓武,俞琰.基于大数据技术的网络日志分析系统研究[J].现代电子技术,2016,39(2):39-41.REN Kai,DENG Wu,YU Yan.Research on network log analysis system based on big data technology[J].Modern electronics technique,2016,39(2):39-41.