网络大数据信息处理平台的设计与实现Design and implementation of network big data information processing platform
马杰
摘要(Abstract):
基于正交分解的网络大数据信息处理平台采用单一网络数据特征提取方法,导致数据信息处理效果较差。故设计基于Web的网络大数据信息处理平台。设计平台体系架构包括服务层、功能层和平台层。采用以太网管制芯片CP2200和单片机C8051F340构建网络大数据信息采集模块,平台层通过该模块进行网络大数据信息的采集,利用以IXP2400网络处理器为核心的网络大数据信息处理器实现对网络大数据的信息处理。功能层采用时域特征提取算法对网络大数据中人为数据瞬时能量及其均方值、过零率和高过零帧比特征进行提取,利用频域特征提取算法对人为数据内的梅尔频率倒谱系数及线性预测系数进行提取,为后续信息处理提供可靠分析依据。试验结果表明,所设计平台进行网络大数据信息处理时稳定性高、资源占用率低、运行效果好。
关键词(KeyWords): 网络大数据;信息处理平台;信息采集;信息处理器;时域特征;频域特征
基金项目(Foundation): 江苏省高校自然科学基金面上项目(17KJB520016)~~
作者(Author): 马杰
DOI: 10.16652/j.issn.1004-373x.2018.24.018
参考文献(References):
- [1]张科星.网络大数据平台中的特征数据分类系统设计与实现[J].现代电子技术,2017,40(8):25-28.ZHANG Kexing. Design and implementation of feature data classification system in network big data platform[J]. Modern electronics technique,2017,40(8):25-28.
- [2]向小佳,赵晓芳,刘洋,等.一种正交分解大数据处理系统设计方法及实现[J].计算机研究与发展,2017,54(5):1097-1108.XIANG Xiaojia,ZHAO Xiaofang,LIU Yang,et al. An orthogonal decomposition based design method and implementation for big data processing system[J]. Journal of computer research and development,2017,54(5):1097-1108.
- [3]赵光远,秦丰林,郭晓东.基于P2P的网络测量云平台的设计与实现[J].山东大学学报(理学版),2017,52(12):104-110.ZHAO Guangyuan,QIN Fenglin,GUO Xiaodong. Design and implementation of P2P-based network measurement cloud platform[J]. Journal of Shandong University(Natural science),2017,52(12):104-110.
- [4]姜腊林,杨嘉佳,姜磊,等.高速网络流采集系统的设计与实现[J].计算机应用,2014,34(11):3201-3205.JIANG Lalin,YANG Jiajia,JIANG Lei,et al. Design and implementation of high-speed network traffic capture system[J].Journal of computer applications,2014,34(11):3201-3205.
- [5]沈宇,王祺.基于大数据的煤矿安全监管联网平台设计与实现[J].矿业安全与环保,2016,43(6):21-24.SHEN Yu, WANG Qi. Design and implementation of coal mine safety supervision networking platform based on big data[J]. Mining safety&environmental protection,2016,43(6):21-24.
- [6]王磊,王西点,程楠.基于大数据技术的智能化无线网络优化体系[J].电信科学,2015,31(12):167-171.WANG Lei,WANG Xidian,CHENG Nan. Intelligent system of wireless network optimization based on big data technology[J]. Telecommunications science,2015,31(12):167-171.
- [7]张倩.高校档案物联网大数据处理平台的构建方案研究[J].档案与建设,2016,33(2):39-43.ZHANG Qian. Research on the construction scheme of IoT big data archival processing platform in colleges and universities[J]. Archives&construction,2016,33(2):39-43.
- [8] WANG Z,CHEN D,LI L. Design and implementation of personalized information customization system based on Hadoop cloud platform[J]. Journal of Jilin University(Information science edition),2016,34(2):271-277.
- [9]刘香兰.煤矿安全生产大数据分析与管理平台设计研究[J].煤炭工程,2017,49(6):32-35.LIU Xianglan. Design and research of big data analysis and management platform for coal mine safety production[J]. Coal engineering,2017,49(6):32-35.
- [10]张晶.大数据平台下数据库访问信息安全管理仿真[J].计算机仿真,2017,34(7):436-440.ZHANG Jing. Simulation of database access information security management under big data platform[J]. Computer simulation,2017,34(7):436-440.