XJIPC OpenIR  > 多语种信息技术研究室
用Fluent与MongoDB构建高效海量日志采集系统
韩岩; 李晓
2014
发表期刊中国新技术新产品
ISSN1673-9957
期号12页码:31-33
摘要由于传统方法不能满足海量日志存储的需求,对于海量日志的分析传统方法也出现了瓶颈问题,所以本文通过不同类型存储介质对海量日志读写性能实验,并与日志采集软件相结合提出了解决存储海量日志的一种方案:用Fluent(日志采集软件)与MongoDB来构建日志采集系统。实验表明:这种方式与传统存储方式相比,突破单机环境下日志存取的瓶颈,大幅度提高海量日志的存取速度,简化了日志分析与统计操作。在MongoDB集群环境下,高并发的读写满足了海量日志存取的需求,并且这种集群具有可扩展性和高可用性。
关键词Fluent Mysql Mongodb Hadoop 海量日志 日志采集系统
文献类型期刊论文
条目标识符http://ir.xjipc.cas.cn/handle/365002/3702
专题多语种信息技术研究室
作者单位中国科学院新疆理化技术研究所;中国科学院大学
推荐引用方式
GB/T 7714
韩岩,李晓. 用Fluent与MongoDB构建高效海量日志采集系统[J]. 中国新技术新产品,2014(12):31-33.
APA 韩岩,&李晓.(2014).用Fluent与MongoDB构建高效海量日志采集系统.中国新技术新产品(12),31-33.
MLA 韩岩,et al."用Fluent与MongoDB构建高效海量日志采集系统".中国新技术新产品 .12(2014):31-33.
条目包含的文件
文件名称/大小 文献类型 版本类型 开放类型 使用许可
用Fluent与MongoDB构建高效海(901KB)期刊论文作者接受稿开放获取CC BY-NC-SA浏览 请求全文
个性服务
推荐该条目
保存到收藏夹
查看访问统计
导出为Endnote文件
谷歌学术
谷歌学术中相似的文章
[韩岩]的文章
[李晓]的文章
百度学术
百度学术中相似的文章
[韩岩]的文章
[李晓]的文章
必应学术
必应学术中相似的文章
[韩岩]的文章
[李晓]的文章
相关权益政策
暂无数据
收藏/分享
文件名: 用Fluent与MongoDB构建高效海量日志采集系统.pdf
格式: Adobe PDF
所有评论 (0)
暂无评论
 

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。