首页 > 网站 > WEB服务 > 正文

PHP实现定时监控nginx日志文件的功能

2020-03-22 20:18:09
字体:
来源:转载
供稿:网友
这篇文章主要介绍了PHP简单实现定时监控nginx日志文件功能,涉及php定时读取nginx服务器日志以及基于curl的数据传输相关操作技巧,需要的朋友可以参考下

本文实例讲述了PHP简单实现定时监控nginx日志文件功能。分享给大家供大家参考,具体如下:

此功能是为了实现,定时监控nginx生成的日志数据,并将新增的数据提交到一个接口(比如大数据的接口,让大数据来进行分析)

define( MAX_SHOW , 8192*5); //新增数据提交阈值define( LOG_NAME , //读取的日志文件define( LOG_SIZE , //保留上次读取的位置define( LOG_URL , //日志提交地址//运行时log文件原始大小$log_size = get_filesize();$file_size = filesize(LOG_NAME);if(empty($log_size)){//没有记录上次位置,则从当前位置开始 $file_size = $file_size;}else if($log_size $file_size){ //说明是第二天的日志文件,指针放到文件头 $file_size = 0;}else{ //从上次记录的位置开始 $file_size = $log_size;$file_size_new = 0;$add_size = 0;$ignore_size = 0;$fp = fopen(LOG_NAME, r while(1){ clearstatcache(); $read_num = 0; $file_size_new = filesize(LOG_NAME); $add_size = $file_size_new - $file_size; $add_data = array(); $add_log =  if($add_size 0){ //大于一个阈值提交数据 if($add_size MAX_SHOW){ fseek($fp, $file_size); //当增加量超过8192,需要分页读取增加量 $page = ceil($add_size/8192); for($i=1; $i =$page; $i++){ if($i == $page){//最后一页 $end_add = $add_size - ($page -1) * 8192; $add_log .= fread($fp, $end_add); }else{ $add_log .= fread($fp, 8192); $file_size_step = $file_size + $i * 8192; fseek($fp, $file_size_step); $add_data[ add_log ] = $add_log; $add_data[ add_log ] = base64_encode($add_data[ add_log  http_post(LOG_URL, $add_data); $file_size = $file_size_new; //记录当前位置 save_filesize($file_size); }else if($add_size 0){ //第二天从头部开始 $file_size = 0; sleep(2);fclose($fp); * 每次启动时获取上次打开文件位置function get_filesize(){ $size = file_get_contents(LOG_SIZE); return $size; * 每次提交后保存这次读取文件的位置function save_filesize($size){ return file_put_contents(LOG_SIZE, $size); * http请求 * @param array $data * @return booleanfunction http_post($url = , $data = array()) if(empty($url)){ return FALSE; if($data){ $data = http_build_query($data); $ch = curl_init (); curl_setopt ( $ch, CURLOPT_URL, $url ); curl_setopt ( $ch, CURLOPT_POST, 1 ); curl_setopt ( $ch, CURLOPT_HEADER, 0 ); curl_setopt ( $ch, CURLOPT_TIMEOUT, 5 ); curl_setopt ( $ch, CURLOPT_RETURNTRANSFER, 1 ); curl_setopt ( $ch, CURLOPT_POSTFIELDS, $data ); $return = curl_exec ( $ch ); curl_close ( $ch ); return $return;}

备注:由于日志文件过了凌晨会切割,所以需要做一下判断,判断是第二天的日志需要从日志文件头部进行读取

需要优化的逻辑:当中间进程挂了,停了一段时间,再启动时,从上次的位置重新读取,提交的数据会比较大,可能会超过提交数据大小的限制

以上就是本文的全部内容,希望对大家的学习有所帮助,更多相关内容请关注PHP !

相关推荐:

PHP使用zlib扩展实现GZIP压缩输出的方法详解

PHP实现分布式memcache设置web集群session同步的方法详解

PHP实现的mongoDB数据库操作类完整实例讲解

以上就是PHP实现定时监控nginx日志文件的功能的详细内容,PHP教程

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表