>>分享SPSS,Hadoop等大数据处理技术,以及分布式架构以及集群系统的构建 书籍支持  卫琴直播  品书摘要  在线测试  资源下载  联系我们
发表一个新主题 开启一个新投票 回复文章 您是本文章第 21404 个阅读者 刷新本主题
 * 贴子主题:  Apacheの日志分割 回复文章 点赞(0)  收藏  
作者:flybird    发表时间:2020-01-27 14:37:42     消息  查看  搜索  好友  邮件  复制  引用

    为什么我们要进行日志分割呢

      随着网站的访问量越来越大,web服务器产生的日志文件也会越来越大,如果不对其进行分割管理,单个日志文件会变得异常庞大,不利于对日志进行综合分析、监控等。另外,当服务器遇到故障时,运维人员就要打开日志文件进行分析,打开的过程必然会消耗很长时间,也势必会增加处理故障的时间。因此管理好海量的日志文件对管理网站是有重大意义的。

  这篇博客就简单的介绍日志分割的两种办法。首先使用yum -y install httpd安装Apache的软件包。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后修改主配置文件,/etc/httpd/conf/httpd.conf,把这里的主机名换成一个测试的域名。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后找到日志文件的那一行,后面的路径换成ErrorLog "| /usr/sbin/rotatelogs -l /var/log/httpd/www.demo.com.error_%Y%m%dlog 86400",这是固定写法。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    错误日志修改完成后,我们要修改正常的访问日志。把原来配置语句注释掉,然后在下面添加新的语句CustomLog "| /usr/sbin/rotatelogs -l logs/demo.com.access_%Y%m%dlog 86400" combined即可,完后保存退出启动服务就可以了。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后这本以日期分割的日志文件就出现了。然后这边把系统日期更改一下然后看看日志文件能不能生成,现在系统时间2019年10月10号,这边把系统时间改成2019年10月20号,然后重启一下服务。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后以2019年10月20号为分割的日志文件就出现了。这是以Apache自带的工具实现日志分割,这边还有一个第三方软件也可以进行日志分割就是cronolog。最后会附上下载连接。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    首先我们把这个软件包推送到Linux系统的mnt目录当中。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后使用rpm -ivh cronolog-1.6.2-14.el7.x86_64.rpm 命令安装该软件包,然后查看这个命令的路径。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后修改Apache的配置文件。ErrorLog "| /usr/sbin/cronolog /var/log/httpd/abc.com.error_%Y%m%dlog"这是错误日志的写法,CustomLog "| /usr/sbin/cronolog /var/log/httpd/abc.com.access_%Y%m%dlog" combined这是访问日志的写法,注意当中的域名要修改为自己的域名。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后删除日志路径下的所有文件,重启服务。最后童谣日志的分割文件也出来,两种工具都能达到同样的效果。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小 .

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

                      

----------------------------
原文链接:https://blog.51cto.com/14451009/2445325

程序猿的技术大观园:www.javathinker.net



[这个贴子最后由 flybird 在 2020-01-28 17:46:50 重新编辑]
  Java面向对象编程-->输入与输出(上)
  JavaWeb开发-->JSP技术详解(Ⅱ)
  JSP与Hibernate开发-->Java对象持久化技术概述
  Java网络编程-->非阻塞通信
  精通Spring-->绑定表单
  Vue3开发-->通过Axios访问服务器
  springboot的缓存技术
  spark-redis使用简易脚本
  kafka+spark-streaming实时推荐系统性能优化笔记
  glusterfs 7 分布式存储 目前最新版实战详解
  MapReduce实现自定义排序功能
  深入玩转K8S之使用kubeadm安装Kubernetes v1.10以及常见问题...
  SNMP 已死 - Streaming Telemetry 流遥测技术
  最常用的四种大数据分析方法
  如何设计实时数据平台(设计篇)-wx5c2da66615f74的博客
  hive 的支持的文件类型与 压缩格式
  超详细的Hadoop2配置详解
  大数据项目之仿天猫数据分析
  SQL Hadoop核心结束揭秘
  数据仓库的两种建模方法
  大数据的处理技术
  更多...
 IPIP: 已设置保密
树形列表:   
1页 0条记录 当前第1
发表一个新主题 开启一个新投票 回复文章


中文版权所有: JavaThinker技术网站 Copyright 2016-2026 沪ICP备16029593号-2
荟萃Java程序员智慧的结晶,分享交流Java前沿技术。  联系我们
如有技术文章涉及侵权,请与本站管理员联系。