IT博客汇
首页
精华
技术
设计
资讯
扯淡
权利声明
登录
注册
flume介绍及扩展开发心得
zhoubl668
发表于
2016-05-20 19:18:17
love
0
一、flume简介Flume是Cloudera提供的日志收集系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种storage。Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。上图的Flume的Architecture,在Flume中,最重要的抽象是data flow(数据流),data flow描述了数据从产