利用python分析日志生成图表

  这篇文章讲的是采用python生成报表的方案。 工具:python、mysql、日志文件、hightchart 应用场景:平时工作中经常遇到一些需要统计的工作,比如门户类的网站新闻采集量、发布量、废弃量等,能够直观的显现出来,这样对于分析流量、SEO、等都非常方便。

处理流程:

分析日志

python分析日志文件,日志可以是apache、nginx的访问日志,也可以是自定义生成的日志

统计数据入库

将python分析日志得到的统计数据放到mysql库中

利用flask渲染页面

利用flask框架,生成路由和渲染图表页面

连接Mysql读取数据

图表数据从mysql库中读取,返回json对象,5分钟一条记录

highcharts

利用highcharts生成实时监控数据图表 利用python分析日志生成图表   代码在git上,地址如下: https://github.com/guyfar/python_chart 欢迎fork和star :)

转载于:https://my.oschina.net/guyfar/blog/694390