[1]白超,杨静,吴建国.基于并行计算的海量日志分析系统实现[J].计算机技术与发展,2013,(07):80-83.
　BAI Chao[],YANG Jing[],WU Jian-guo[].Implementing of Massive Log Analysis System Based on Parallel Computing[J].,2013,(07):80-83.
点击复制

基于并行计算的海量日志分析系统实现()
分享到：

《计算机技术与发展》[ISSN:1006-6977/CN:61-1281/TN]

卷:
期数:
2013年07期
页码:
80-83
栏目:
智能、算法、系统工程
出版日期:
1900-01-01

文章信息/Info

Title:
Implementing of Massive Log Analysis System Based on Parallel Computing
文章编号:
1673-629X（2013）07-0080-04
作者:
白超1; 杨静2; 吴建国1
[1]安徽大学;[2]解放军电子工程学院 计算机系
Author(s):
BAI Chao[1]; YANG Jing[2]; WU Jian-guo[1]
关键词:
分布式计算; 分布式文件系统; 云计算; 日志处理
Keywords:
distributed computing; distributed file system; cloud computing; log processing
文献标志码:
A
摘要:
通过深入研究日志的类型和特点,设计并实现了一套基于并行计算的海量日志文件分析系统.该系统采用集群方式并行地收集日志文件,采用分布式文件系统存储,最终利用并行计算对日志进行分析处理.该系统实现了日志采集、分析的完全自动化处理,在系统部署之后能够有效地进行系统安全的维护、系统性能的优化、系统故障的排查.该系统结合云计算提高了日志分析的效率,解决了海量日志处理过程中存在的问题,为海量日志分析提供了一个完整有效的解决方案

相似文献/References:

[1]孔令鑫 祝永志 侯秀杰.基于Beowulf集群的可扩展性模型的研究[J].计算机技术与发展,2009,(07):127.
　KONG Ling-xin,ZHU Yong-zhi,HOU Xiu-jie.Research of Scalability Model Based on Beowulf Cluster[J].,2009,(07):127.
[2]蔡群 周美莲 段杰峰 李青.基于Matlab分布式工具箱的流场计算及其可视化[J].计算机技术与发展,2007,(09):51.
　CAI Qun,ZHOU Mei-lian,DUAN Jie-feng,et al.Flow and Its Computational Visualization Based on Matlab MDCT[J].,2007,(07):51.
[3]马俊 杨开英 彭玉卓 郑智高.．Net Remoting与分布式计算[J].计算机技术与发展,2007,(02):118.
　MA Jun,YANG Kai-ying,PENG Yu-zhuo,et al.. Net Remoting and Distributed Computing[J].,2007,(07):118.
[4]江武汉 叶从欢 孙世新.P2P—Grid结构模型研究与设计[J].计算机技术与发展,2006,(02):135.
　JIANG Wu-han,YE Cong-huan,SUN Shi-xin.Research and Design of P2P - Grid Architecure Model[J].,2006,(07):135.
[5]李振 曹谢东 刘世齐.基于CORBA的油气田异构信息系统多源集成[J].计算机技术与发展,2006,(06):60.
　LI Zhen,CAO Xie-dong,LIU Shi-qi.Multi- Resources Integration of Heterogeneous Configuration Information System for Oil and Gas Field Based on CORBA[J].,2006,(07):60.
[6]逄华 王龙 王剑辉.一种基于移动Agent的分布式并行计算模型[J].计算机技术与发展,2011,(02):70.
　PANG Hua,WANG Long,WANG Jian-hui.A Distributed Parallel Computing Model Based on Mobile Agent[J].,2011,(07):70.
[7]王德政 申山宏 周宁宁.云计算环境下的数据存储[J].计算机技术与发展,2011,(04):81.
　WANG De-zheng,SHEN Shan-hong,ZHOU Ning-ning.Data Storage in Cloud Computing Environment[J].,2011,(07):81.
[8]刘军 李锰 王坚 兰陵 周文.一个新的移动计算的嵌入式GIS模型的研究[J].计算机技术与发展,2012,(02):245.
　LIU Jun,LI Meng,WANG Jian,et al.Research of a New Embedded GIS Model Based on Mobile Distributed Computing Environment[J].,2012,(07):245.
[9]王梅,朱信忠,赵建民,等.基于 Hadoop 的海量图像检索系统[J].计算机技术与发展,2013,(01):204.
　WANG Mei,ZHU Xin-zhong,ZHAO Jian-min,et al.Massive Images Retrieval System Based on Hadoop[J].,2013,(07):204.
[10]苏凯.基于云计算的分布式电费计算系统研究及实证[J].计算机技术与发展,2013,(04):217.
　SU Kai.Empirical Study of Distributed Electricity Calculation System Based on Cloud Computing[J].,2013,(07):217.

更新日期/Last Update: 1900-01-01