第一：两个文件的交集，并集前提条件：每个文件中不得有重复行1. 取出两个文件的并集(重复的行只保留一份)2. 取出两个文件的交集(只留下同时存在于两个文件中的文件)3. 删除交集，留下其他的行1. c ...

一、由来：需要做一个定时任务定期从MySQL数据库同步数据到Oracle，5m/次，同步日志写在一个文件恐有不妥，故而需要分割，一般按天，这里为了调试，按分操作。 　　1.任务如下：分别指定任务的脚本，任务读取文件路径，任务日志输出； 　　2.新建分割日志任务 ...

该脚本的功能是定时分割日志文件 ...

　　经常有这样的情况，日志文件或者数据文件会变得很庞大，那么每次对这些目标文件的访问或者修改就会变得极其耗时。因而引发一些性能问题，但是如果对这些目标文件进行分割，限定其大小，那么每次的访问或者修改就会变得高效。 一、实现原理： 　　用Linux自带的定时任务Crontab以及日志分割 ...

本文主要讲述使用cronolog分割tomcat的catalina.out文件。 1. 下载编译安装 2. 查看cronolog安装后所在目录（验证安装是否成功） 如下图所示： 3. 编辑Tomcat目录bin下的catalina.sh文件 找到下面 ...

排序 uniq 对内容进行去重 / uniq -c 统计重复次数 cat filename | ...

wc 命令一般是作为组合命令的一员与其他命令一同起到统计的作用。而一般情况下使用wc -l 命令较多。 uniq 可检查文本文件中重复出现的行，一般与 sort 命令结合使用。一起组合搭配使用完成统计、排序、去重。 1 wc 常用组合命令 ls | wc -l # 统计当前 ...

Linux nginx日志按天分割实例 nginx的日志有个小缺点，日志文件一直就是一个，不会自动地进行切割，如果访问量很大的话，将导致日志文件非常大，不便于管理这就需要我们自己来实现了，按日期每天生产一个日志文件思路 每天零点把默认日志文件改名为当天日期，再重新打开 ...