大数据学习笔记5-flume收集数据发给Kakka

1490阅读 0评论2017-09-13 landuochong
分类:大数据

Flume收集数据到Kafka
1.启动Zookeeper, Kafka,参考上一篇文章,创建topic,启动Kafka消费者终端
2.修改Flume的配置文件

    MyAgent.sinks.mysink.type = org.apache.flume.sink.kafka.KafkaSink  
    MyAgent.sinks.mysink.topic = test  
    MyAgent.sinks.mysink.brokerList = localhost:9092  
    MyAgent.sinks.mysink.requiredAcks = 1  
    MyAgent.sinks.mysink.batchSize = 20 

3.启动Flume收集数据
上一篇:大数据学习笔记4-Kafka
下一篇:大数据学习笔记6-Hbase