python 多线程日志切割+日志分析
admin 11年前 (2014-06-10) 4207浏览 0评论
楼主最近刚刚接触python,还是个小菜鸟,没有学习python之前可以说楼主的shell已经算是可以了,但用shell很多东西实现起来还是不可能的事情,例如最明显的一点大日志分析,由于楼主的公司,每天的日志量很大,用shell分析的会非常非常的慢。...
admin 11年前 (2014-06-10) 4207浏览 0评论
楼主最近刚刚接触python,还是个小菜鸟,没有学习python之前可以说楼主的shell已经算是可以了,但用shell很多东西实现起来还是不可能的事情,例如最明显的一点大日志分析,由于楼主的公司,每天的日志量很大,用shell分析的会非常非常的慢。...
admin 11年前 (2014-03-21) 3082浏览 0评论
1. 背景介绍 许多公司的平台每天会产生大量的日志(一般为流式数据,如,搜索引擎的pv,查询等),处理这些日志需要特定的日志系统,一般而言,这些系统需要具有以下特征: (1) 构建应用系统和分析系统的桥梁,并将它们之间的关联解耦; (2...
admin 12年前 (2013-03-10) 4440浏览 0评论
提到web服务器就不得不说nginx。这款由俄罗斯人开发的小巧的web服务软件近几年来风靡大江南北;成为许多草根站长建设网站的首选。但由于历史原因,nginx在日志分析工具相较于传统的apache、lighthttp等要匮乏的多。 笔者今天在这里为各...
admin 12年前 (2012-11-08) 3319浏览 0评论
我们用squid,少不了对squid日志的分析,但别的软件太麻烦,现在有个不错的好东东acalar. acalar的确是满好用的squid日志分析工具,强力推荐给有管理的兄弟—真是居家旅行、杀人灭口必备啊. 命令超级容易.这是一个命令行的工具,只要给...