公司項目需要將分布在多臺機器中的日志統一收集管理。筆者先后使用logstash，flume等開源項目。并最終自研一套基于Java語言的日志收集系統 Bloodhound。以下從項目關注的角度對開...

常用的日志收集系統有Syslog-ng，Scribe，Flume，當然還有ELK的LogStash.而目前互聯網公司最長用的時Scribe和Flume，Scibe是Facebook開源的，但是現...

Flume OG：Flume Original eneration，初代Flume。由三種角色構成：代理點（agent）、收集節點（collector）、主節點（master）

隨著云計算、PaaS平臺的普及，虛擬化、容器化等技術的應用，例如Docker等技術，越來越多的服務會部署在云端。

Apache Flume，是一個分布式的、可靠的、高可用的服務，用于收集、聚合、傳輸大量的事件型數據的應用組件。本篇文章是關于Apache Flume性能調優系列文章的第一部分。

本文是野狗實時后端云資深工程師廖斌旭在“iGeek Camp”第4期北京站上進行的《基于Flume的野狗實時日志系統的演進和優化》的演講實錄，主要分為兩個部分：野狗日志系統的架構演進和優化方案。...

最近我在日志收集的功能中加入了對docker容器日志的支持。這篇文章簡單談談策略選擇和處理方式。

業務決定架構，在講解日志架構之前，先介紹一下我們野狗的業務。野狗云為應用開發提供數據存儲和實時通信服務。使用野狗的SDK即可獲得可擴容的數據存儲與毫秒級的實時通信。我們的業務共有兩類SDK，基于...

最近在學習Flume源碼，所以想寫一份Flume源碼學習的筆記供需要的朋友一起學習參考。

這段時間花了部分時間在處理 消息總線 跟日志的對接上。這里分享一下在日志采集和日志解析中遇到的一些問題和處理方案。

Flume是cloudera于2009年7月開源的日志系統。 Flume支持在日志系統中定制各類數據發送方，用于收集數據；同時，Flume提供對數據進行簡單處理，并寫到各種數據接受方(可...

○ Flume是由cloudera開發的實時日志收集系統 ○ 核心概念是由一個叫做Agent(代理節點)的java進程運行在日志收集節點 ○ Flume在0.94.0版本以前...

Flume 是 Cloudera 提供的日志收集系統，具有分布式、高可靠、高可用性等特點，對海量日志采集、聚合和傳輸，Flume 支持在日志系統中定制各類數據發送方，同時，Flume提供對數據進...

Flume是一個分布式、可靠、和高可用的海量日志采集、聚合和傳輸的系統。支持在系統中定制各類數據發送方，用于收集數據；同時，Flume提供 對數據進行簡單處理，并寫到各種數據接受方（可定制）的能...