Flume 整合 Kafka_flume 到kafka 配置【转】

1.背景先说一下，为什么要使用 Flume + Kafka？ 以实时流处理项目为例，由于采集的数据量可能存在峰值和峰谷，假设是一个电商项目，那么峰值通常出现在秒杀时，这时如果直接将 Flume 聚合后的数据输入到 Storm 等分布式计算框架中，可能就会超过集群的处理能力，这时采用 Kafka 就可
posted @ 2024-04-15 13:48  paul_hch  阅读(25)  评论(0)  编辑  收藏  举报