简述什么是 Flume NG？

Flume NG是一个分布式、可靠、可用的系统，它专注于将不同数据源的海量日志数据进行高效收集、聚合、移动，并最终存储到一个中心化数据存储系统中。该系统经过架构重构后，变得更加轻量、简单，且容易适应各种方式的日志收集。此外，Flume NG还支持failover和负载均衡，确保数据处理的稳定性和高效性。

在Flume NG中，数据流由事件（Event）贯穿始终。可以将数据流动的过程想象为一个池子，它一头进水，另一头出水。进水口可以配置各种管子，出水口也可以配置各种管子，这些进水口和出水口可以有多个。在Flume NG的术语中，进水口被称为Source，出水口被称为Sink，而池子则被称为Channel。这三者的组合（Source+Channel+Sink）被称为Agent。Channel可以看作是一个缓冲区，它会保存事件直到Sink处理完该事件。Sink则负责持久化日志或者将事件推向另一个Source。

总的来说，Flume NG是一个功能强大的日志收集、聚合和存储系统，能够处理来自不同数据源的海量日志数据，并通过其分布式、可靠和可用的特性确保数据的高效处理和存储。