大数据:数据采集平台之Apache Chukwa

大数据:数据采集平台之Apache Chukwa


  1. Apache Flume
    详情请看文章:《大数据:数据采集平台之Apache Flume

  2. Fluentd
    详情请看文章:《大数据:数据采集平台之Fluentd

  3. Logstash
    详情请看文章:《大数据:数据采集平台之Logstash

  4. Apache Chukwa
    详情请看文章:《大数据:数据采集平台之Apache Chukwa

  5. Scribe
    详情请看文章:《大数据:数据采集平台之Scribe

  6. Splunk Forwarder
    详情请看文章:《大数据:数据采集平台之Splunk Forwarder


官网:https://chukwa.apache.org/

Apache Chukwa是Apache旗下除Apache Flume外,又一个开源的数据收集平台。Chukwa基于Hadoop的HDFS和Map Reduce来构建(显而易见,它用Java来实现),提供扩展性和可靠性。Chukwa同时提供对数据的展示,分析和监视。该项目已经不活跃了,它的 github上一次的更新是7年前。

Chukwa的部署架构如下:
在这里插入图片描述
Chukwa的主要单元有:Agent,Collector,DataSink,ArchiveBuilder,Demux等等,看上去相当复杂。


参考:https://mp.weixin.qq.com/s/emQ_94T0_Hw3ywQc0-4Dtg

©️2020 CSDN 皮肤主题: Age of Ai 设计师:meimeiellie 返回首页