linux定时清理nohup命令下产生的日志

linux定时清理nohup命令下产生的日志,第1张

         nohup命令 将程序以忽略挂起信号的方式运行起来,被运行的程序的输出信息将不会显示到终端。一般用于将程序的输出、报错信息重定向到一个指定路径的指定文件。语法 :nohup [command] [args] [&]     nohup命令 最后要带个&作为结束 例:nohup python XXX.py >abc/def/XXX.log 2>&1 & args: 0 – stdin (standard input),1 – stdout (standard output),2 – stderr (standard error) ; 2>&1是将标准错误(2)重定向到标准输出(&1),标准输出(&1)再被重定向输入到文件,即XXX.log中。 nohup命令的缺点:日志文件文件越来越大,占内存且查看麻烦。因为这个日志文件和程序是共生死的,因为只要程序运行起来,就一直对log文件进行读写,直接删除XXX.log会导致程序也被结束了。 目前想到的一些相关方法如下,并未完全解决问题。 参考: linux下nohup日志输出过大问题解决方案split命令: 参数:-b:值为每一输出档案的大小,单位为 byte。            -C:每一输出档中,单行的最大 byte 数。            -d:使用数字作为后缀。默认这个数字后缀是两位的,例如00,01,11. -a: 指定位数,例如 -a 4表示后缀是四位的。            -l:值为每一输出档的列数大小。            PREFIX:代表前导符,可作为切割文件的前导文件。 例如:可以用split命令把很大的日志文件分成多个小文件,分割完成后 原文件不变 。不会影响nohup运行的程序。 缺点:split文件分割依赖手动,当程序出故障或调试时,将日志分割以便查看最新的日志信息。没法定时做到定时自动清理。首先介绍find命令的参数参考: linux find命令详解在这里主要用到的是这几个参数: -atime n 查找系统中最后n*24小时访问的文件 -ctime n  查找系统中最后n*24小时被改变文件状态的文件 -mtime n  查找系统中最后n*24小时被改变文件数据的文件 +n: n天前; -n: n天之内find命令还可以和下一条命令连用(xargs或exec)或 注:{}表示find到的东西;{}和 \之间要有一个空格 我感觉exec不是很好用,怪怪的cat dev/null在 Linux 中, null 设备基本上被用来丢弃某个进程不再需要的输出流,或者作为某个输入流的空白文件,这些通常可以利用重定向机制来达到。 所以 /dev/null 设备文件是一个特殊的文件,它将清空送到它这里来的所有输入,而它的输出则可被视为一个空文件。另外,你可以通过使用 cat 命令显示 /dev/null 的内容然后重定向输出到某个文件,以此来达到清空该文件的目的。通过使用cat /dev/null,文件大小为0字节。 用cat删除文件: 但是我发现对于nohup的程序的日志,这样是无效的。因为nohup的程序持续不断地在读写日志文件,此时无法重定向,我试了几次,日志文件都压根没动。crontab用于设置定时任务 参考:  linux crontab定时执行shell脚本crontab命令被用来提交和管理用户的需要周期性执行的任务,与windows下的计划任务类似,当安装完成 *** 作系统后,默认会安装此服务工具,并且会自动启动crond进程,crond进程每分钟会定期检查是否有要执行的任务,如果有要执行的任务,则自动执行该任务。 语法  crontab(选项)(参数) 选项  -e:编辑该用户的计时器设置;  -l:列出该用户的计时器设置;  -r:删除该用户的计时器设置;  -u<用户名称>:指定要设定计时器的用户名称。 参数  crontab文件:指定包含待执行任务的crontab文件。 首先crontab -e,就会进入vi编辑界面。然后直接把新的命令输进去就行了。minute hour day month week command /XXX/XXX.log 顺序:分 时 日 月 周minute: 表示分钟,可以是从0到59之间的任何整数。 hour:表示小时,可以是从0到23之间的任何整数。 day:表示日期,可以是从1到31之间的任何整数。 month:表示月份,可以是从1到12之间的任何整数。 week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。 /n表示每个n的单位执行一次 command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。 意为每周的1:00执行,且输出重定向到黑洞目录。

在linux上执行脚本,当退出页面或电脑锁屏后,脚本就停止执行了。对需要长时间运行的脚本非常不友好。

nohup(no hang up):可以让程序不挂断执行。

&:可以让程序在后台执行。

“>nohup.log”: 表示将日志输出到nohup.log文件上。

2>&1:表示将正确日志、错误日志都输出到正确日志指定的文件(nohup.log文件)上。

nohup.out日志文件太大了,且一直增长,命令查看日志受阻

①切割大文件变成多个小文件

②每天定时保存前一天的日志,重新记录当天日志

1.利用split命令切割

①按文件大小切割大文件:

切割文件:将ohup.out文件每500M切割一个文件放到/home/nginx/logs/newlog/目录下

②按文件行数切割大文件:

查询文件行数:

wc -l b.log

2038711 b.log

按50W行切割一个文件:

split -l 500000 -d -a 4 /home/nginx/logs/b.log /home/nginx/logs/newlog/

2.定时备份前一天日志,重新记录当天日志splitlog.sh

3.定时执行

查看定时任务:

crontab -l

编辑定时任务:

crontab -e

重启定时任务:

删除10天以前的日志文件,此日期为文件本身的时间,非日志内容时间


欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/yw/7190146.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2023-04-02
下一篇2023-04-02

发表评论

登录后才能评论

评论列表(0条)

    保存