更新时间:2021-03-04 来源:黑马程序员 浏览量:
为什么选择kafka采集数据？大数据采集层主要可以使用Flume， Kafka两种技术。
Flume：Flume 是管道流方式，提供了很多的默认实现，让用户通过参数部署，及扩展API。
Kafka：Kafka是一个可持久化的分布式的消息队列。 Kafka是一个非常通用的系统。你可以有许多生产者和很多的消费者共享多个主题Topics。
相比之下，Flume是一个专用工具被设计为旨在往HDFS，HBase发送数据。它对HDFS有特殊的优化，并且集成了Hadoop的安全特性。所以，Cloudera 建议如果数据被多个系统消费的话，使用Kafka；如果数据被设计给Hadoop使用，使用Flume。
猜你喜欢：
【AI设计】北京143期毕业仅36天，全员拿下高薪offer！黑马AI设计连续6期100%高薪就业
2025-09-19【跨境电商运营】深圳跨境电商运营毕业22个工作日，就业率91%+，最高薪资达13500元
2025-09-19【AI运维】郑州运维1期就业班，毕业14个工作日，班级93%同学已拿到Offer， 一线均薪资 1W+
2025-09-19【AI鸿蒙开发】上海校区AI鸿蒙开发4期5期，距离毕业21天，就业率91%，平均薪资14046元
2025-09-19【AI大模型开发-Python】毕业33个工作日，就业率已达到94.55%，班均薪资20763元
2025-09-19【AI智能应用开发-Java】毕业5个工作日就业率98.18%，最高薪资 17.5k*13薪，全班平均薪资9244元
2025-09-19
AI智能应用开发
AI大模型开发
AI鸿蒙开发
AI嵌入式+
AI大数据开发
AI运维
AI测试
跨境电商运营
AI设计
AI视频创作运营
.jpg)