这个linux教程将为您说明heka配置讲解,具体操作过程:
基于heka，elasticsearch和kibana的分布式后端日志架构
目前主流的后端日志都采用的标准的elk模式（elasticsearch，logstash，kinaba），分别负责日志存储，收集和日志可视化。
不过介于我们的日志文件多样，分布在各个不同的服务器，各种不同的日志，为了日后方便二次开发定制。所以采用了mozilla仿照logstash使用golang开源实现的heka。
基于heka，elasticsearch和kibana的分布式后端日志架构目前主流的后端日志都采用的标准的elk模式（elasticsearch，logstash，kinaba），分别负责日志存储，收集和日志可视化。
不过介于我们的日志文件多样，分布在各个不同的服务器，各种不同的日志，为了日后方便二次开发定制。所以采用了mozilla仿照logstash使用golang开源实现的heka。
整体架构图采用heka，elasticsearch和kibana后的整体架构如下图所示
heka篇简介heka对日志的处理流程为输入 分割 解码 过滤 编码 输出。单个heka服务内部的数据流了通过heka定义的message数据模型在各个模块内进行流转。
heka内置了常用的大多数模块插件，比如
输入插件有logstreamer input可以将日志文件作为输入源，
解码插件nginx access log decoder可以将nginx访问日志解码为标准的键值对数据交给后边的模块插件进行处理。
得益于输入输出的灵活配置，可以将分散各地的heka收集到的日志数据加工后统一输出到日志中心的heka进行统一编码后交给elasticsearch存储。
以上就是heka配置的详细介绍的详细内容。