Kibana使用sentinl报警实践

背景介绍: 对于Kibana的一些数据我们有时候是想要对某些字段进行持续关注的,这时候通过报警的手段就可以大幅提升对这些信息状态了解的及时性及可靠性。使用Sentinl这个kibana开源插件,就可以帮助我们实现这个功能。这里记录一下我的实践过程,主要是对一些业务数据某些字段进行监控报警。

Docker备份还原简介

一般而言,使用docker远端镜像仓库的话,基本不需要使用备份还原,但再某些情况下也是需要这些操作的,如对网络受限的主机进行部署或者基于安全考虑对本地仓库进行备份,就需要这些操作,总之Docker的备份还原还是十分简便的,这里也做一下记录。

关于Fluentd使用中filter及ES插件的问题记录

**背景介绍:**线上需求将业务log数据清洗后导入kibana,原始log也要一同导入,从服务直接输出两份log肯定是不合理的,所以考虑从fluentd收集的时候进行处理,先将原始数据复制为2份,然后一份直接导入kibana,另一份通过fluentd的filter进行过滤筛选后导入kibana。其中filter遇到无法筛选nested类型数据的问题,升级版本后并更改写法后解决;升级后导致ES的index无法按原来的方法命名的问题,通过更换ES插件解决,具体见以下记录。

测试环境: OS: Amazon Linux AMI release 2015.03 Fluentd: td-agent 0.12.20