大数据实时案例–实时日志监控告警系统

本次介绍使用Flume+kafka+storm+mysql的实时日志监控告警系统,代码部分比较多,会放在一个下载的连接里面,可以免费下载。


需求

在软件开发中国,上线运行时经常会出现一些 错,但是我们如果不能进行有效的实时监控,及时的处理,经常会带来巨大损失。为了保证异常的即使处理,我们设计一套系统,对产生的日志进行实时的监控,放出现异常或者指定的信息的时候,给我们的对应工作人员发送邮件和短信提醒,同时记录异常的信息。做到线上异常的实时监控。

基本框架

Flume+Kafka整合

  • 启动kafka和zookeeper
  • 编写Flume模拟生成的异常信息,需要下面4个文件

声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2018年8月25日
下一篇 2018年8月26日

相关推荐