详解linux下nohup日志输出过大问题解决方案

2022-10-14 09:26| 查看: 1296 |来源: 互联网

最近在一hadoop测试集群运行一个spark streaming程序，然后使用nohup ./execute.sh & 执行让程序后台运行，才几天日志就上G了，如果有问题想要查看日志，显然 ...

最近在一hadoop测试集群运行一个spark streaming程序，然后使用nohup ./execute.sh & 执行让程序后台运行，才几天日志就上G了，如果有问题想要查看日志，显然打开文件是一件很麻烦的事，于是我想办法通过减小文件大小：

1、nohup命令解释：

a、语法：nohup [command] [args] [&]

b、说明：nohup 命令运行由 Command 参数和任何相关的 Arg 参数指定的命令，忽略所有挂断信号。在注销后使用 nohup 命令运行后台中的程序。要运行后台中的 nohup 命令，添加 & （表示“and”的符号）到命令的尾部，如果不指定重定向，则日志默认输出到当前目录下nohup.out文件中，

一般提交如：nohup ./execute.sh & 这样日志或输出当前运行目下.nohup.out中

重定向： nohup ./execute.sh > /home/xxx/log.log 2>&1 & :这样日志会重定向到指定目录下

2 、切分nohup.out，同时不让它无限增长

我这里用的一般提交命令：nohup ./execute.sh &，这样在当前目录就有nohup.out文件了，这时候可以想办法定时将nohup.out切分成，多个小文件，但同时又要使nohup.out不会无限增长下去(一般情况下是程序不能中断的)：

a、每天(根据需要设置时间)，定时切分前一天的日志，(比如每天大概1g，那么可以么次切分100m左右),

b、切分完后将nohup.out文件情况，保证新的输出日志会不停的继续输出到nohup.out

以上在shell中

current_date=`date -d "-1 day" "+%Y%m%d"`

split -b 65535000 -d -a 4 nohup.out ./log/log_${current_date}_ 这里使用split命令，将nouhup文件按指定大小切分(65535000b 大概60多M吧，可以自定义大小 )，并分成指定格式（-d -a 4以4位数字形式为后缀以从0000开始,具体可以百度split命令用法）,最终输出格式为log_20160610_0001

cat /dev/null > nohup.out (该命令会瞬间清空nohup.out文件，后续会继续写该文件）,将日志定向到/dev/null中

使用重定向输出一样可以这样，只不过换成重定向的文件名即可

将这些命令定义在一个shell文件每天定时运行即可，这样每天日志会被分成若干份，排查也方便，而且如果日志积压过大的话。可以定时删除历史的日志，保留近几天即可

整体代码如下：

this_path=$(cd `dirname $0`;pwd)
 
cd $this_path
echo $this_path
current_date=`date -d "-1 day" "+%Y%m%d"`
echo $current_date
split -b 65535000 -d -a 4 /home/.../nohup.out  /home/.../log/log_${current_date}_
 
cat /dev/null > nohup.out

以上就是小编给大家介绍的详解linux下nohup日志输出过大问题解决方案，希望对大家有所帮助，如果大家有任何疑问欢迎给我留言，小编会及时回复大家的！

本文最后更新于 2022-10-14 09:26，某些文章具有时效性，若有错误或已失效，请在网站留言或联系站长：17tui@17tui.com

·END·

站长网微信号：w17tui，关注站长、创业、关注互联网人 - 互联网创业者营销服务中心

免责声明：本站部分文章和图片均来自用户投稿和网络收集，旨在传播知识，文章和图片版权归原作者及原出处所有，仅供学习与参考，请勿用于商业用途，如果损害了您的权利，请联系我们及时修正或删除。谢谢！

下一篇：Linux域名服务DNS配置方法上一篇：centos7系统下python2与python3共存

17站长网微信二维码

始终以前瞻性的眼光聚焦站长、创业、互联网等领域，为您提供最新最全的互联网资讯，帮助站长转型升级，为互联网创业者提供更加优质的创业信息和品牌营销服务，与站长一起进步！让互联网创业者不再孤独！

扫一扫，关注站长网微信

详解linux下nohup日志输出过大问题解决方案

大家都在看

相关分类

热门排行

最近更新