标签:Flume

存储架构

Hadoop(八)flume配置

06月08日

实时日志收集系统Flume 分为 Flume NG 和Flume OG,Flume NG是Flume OG的进化版,更简单,更小,更易于部署,Flume NG不一定会向后兼容,所...
scribe、chukwa、kafka、flume日志系统对比
存储架构

scribe、chukwa、kafka、flume日志系统对比

04月22日

1. 背景介绍许多公司的平台每天会产生大量的日志(一般为流式数据,如,搜索引擎的pv,查询等),处理这些日志需要特定的日志系统,一般而言,这些系统需要具有以下特征:(1) 构建应用...
借鉴开源框架自研日志收集系统
综合技术

借鉴开源框架自研日志收集系统

04月21日

项目背景 公司项目需要将分布在多台机器中的日志统一收集管理。笔者先后使用logstash,flume等开源项目。并最终自研一套基于Java语言的日志收集系统 Bloodhound。...
借鉴开源框架自研日志收集系统
存储架构

借鉴开源框架自研日志收集系统

04月21日

项目背景 公司项目需要将分布在多台机器中的日志统一收集管理。笔者先后使用logstash,flume等开源项目。并最终自研一套基于Java语言的日志收集系统 Bloodhound。...
Flume日志采集系统
存储架构

Flume日志采集系统

03月31日

1.简介 Flume是Cloudera提供的一个高可用、高可靠、分布式的海量日志采集、聚合和传输的系统. Flume支持在日志系统中定制各类数据发送方用于收集数据,同时Flume提...
存储架构

Flume性能优化实践

03月26日

最近公司落地Flume日志采集着实反复了好久,简单记录一下性能优化的核心思路。 初始配置所有batch size、transaction size都是1000,channel的ca...
Flume – Kafka日志平台整合
存储架构

Flume – Kafka日志平台整合

03月21日

1. Flume介绍 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;...
Flume1.5.0安装、部署及案例
存储架构

Flume1.5.0安装、部署及案例

01月18日

编辑推荐:本文来自于about云开发,文章主要从安装、部署、及flume的案例,运用代码进行详细介绍,希望对大家有帮助。一、什么是Flume? flume ...

专业 x 专注 x 聚合 x 分享 CC BY-NC-SA 4.0

使用声明 | 英豪名录