flume分层架构
2017-02-15 11:46:08 0 举报
Flume是一个分布式、可靠且可用的大数据日志采集、聚合和传输系统。它采用分层架构设计,包括数据源层、数据采集层、数据传输层和数据接收层。数据源层负责收集各种不同来源的数据,如日志文件、数据库等;数据采集层将数据源中的数据提取出来,并进行必要的处理和转换;数据传输层负责将处理后的数据通过网络传输到指定的目的地;数据接收层则将接收到的数据存储到目标系统中,以便后续分析和处理。这种分层架构使得Flume具有高度的灵活性和可扩展性,能够满足不同场景下的数据采集需求。