filebeat和flume都会有数据重复问题。flume有些没有写入到pos文件中的数据不会重复发送。
举一反三
- flume可以将文件写入到hdfs中
- Flume传输数据过程中，Sink取走数据并写入目的地后，会将event从channel中删除。（）
- 在FusioninsightHD集群中，Flume不支持将采集数据写入到集群中哪个服务？（） A: HDFS B: HBase C: Kafka D: Redis
- Flume传输数据的过程中，Sink取走数据并写入目的地后，会将events从channel中删除。 A: 正确 B: 错误
- 以下关于日志采集工具Flume的说法不正确的是 A: Flume是一个分布式、可靠和高可用的海量日志采集、聚合和传输的日志收集系统 B: Flume的数据源和目标都是可定制、可扩展的 C: Flume支持多级级联和多路复制 D: Flume适用于大量数据的实时数据采集