中国科学院新疆理化技术研究所机构知识库
Advanced  
XJIPC OpenIR  > 多语种信息技术研究室  > 期刊论文
题名: 用Fluent与MongoDB构建高效海量日志采集系统
作者: 韩岩; 李晓
关键词: fluent ; MySQL ; MongoDB ; Hadoop ; 海量日志 ; 日志采集系统
刊名: 中国新技术新产品
发表日期: 2014
期: 12, 页:31-33
资助者: 中国科学院“西部之光”人才培养计划资助项目(XBBS201018)
摘要: 由于传统方法不能满足海量日志存储的需求,对于海量日志的分析传统方法也出现了瓶颈问题,所以本文通过不同类型存储介质对海量日志读写性能实验,并与日志采集软件相结合提出了解决存储海量日志的一种方案:用Fluent(日志采集软件)与MongoDB来构建日志采集系统。实验表明:这种方式与传统存储方式相比,突破单机环境下日志存取的瓶颈,大幅度提高海量日志的存取速度,简化了日志分析与统计操作。在MongoDB集群环境下,高并发的读写满足了海量日志存取的需求,并且这种集群具有可扩展性和高可用性。
内容类型: 期刊论文
URI标识: http://ir.xjipc.cas.cn/handle/365002/3702
Appears in Collections:多语种信息技术研究室_期刊论文

Files in This Item:
File Name/ File Size Content Type Version Access License
用Fluent与MongoDB构建高效海量日志采集系统.pdf(901KB)期刊论文作者接受稿开放获取View 联系获取全文

作者单位: 中国科学院新疆理化技术研究所;中国科学院大学

Recommended Citation:
韩岩,李晓. 用Fluent与MongoDB构建高效海量日志采集系统[J]. 中国新技术新产品,2014(12):31-33.
Service
Recommend this item
Sava as my favorate item
Show this item's statistics
Export Endnote File
Google Scholar
Similar articles in Google Scholar
[韩岩]'s Articles
[李晓]'s Articles
CSDL cross search
Similar articles in CSDL Cross Search
[韩岩]‘s Articles
[李晓]‘s Articles
Related Copyright Policies
Null
Social Bookmarking
Add to CiteULike Add to Connotea Add to Del.icio.us Add to Digg Add to Reddit
文件名: 用Fluent与MongoDB构建高效海量日志采集系统.pdf
格式: Adobe PDF
所有评论 (0)
暂无评论
 
评注功能仅针对注册用户开放,请您登录
您对该条目有什么异议,请填写以下表单,管理员会尽快联系您。
内 容:
Email:  *
单位:
验证码:   刷新
您在IR的使用过程中有什么好的想法或者建议可以反馈给我们。
标 题:
 *
内 容:
Email:  *
验证码:   刷新

Items in IR are protected by copyright, with all rights reserved, unless otherwise indicated.

 

 

Valid XHTML 1.0!
Powered by CSpace