每天0点0分crontab执行备份脚本 2. 先将当前日志文件copy一份作为备份, 备份文件名的后缀为前一天 3. 用当前日志的最后50行覆盖当前日志的内容 备份脚本: 1 #!...5 bakup=${log}'-'${d} 6 7 cp $log $bakup 8 9 tmp=`tail -50 $log` 10 echo $tmp > $log 注意: 如果日志写入速度很快..., 担心备份过程中有丢失, 可以将第9行的值调大 2. crontab 0 0 * * * /usr/local/bin/bakup_log.sh 另外, 可能有些同学还不太熟悉crontab里边的几个时间
声明Provider <?php namespace 命名空间; use IlluminateSupportServiceProvider; use Mon...
nginx的日志有个小缺点,日志文件一直就是一个,不会自动地进行切割,如果访问量很大的话,将导致日志文件非常大,不便于管理 这就需要我们自己来实现了,按日期每天生产一个日志文件 思路 每天零点把默认日志文件改名为当天日期...,再重新打开新的日志文件 使用定时任务来执行脚本,脚本中执行改名和重新打开日志文件的操作 向Nginx主进程发送 USR1 信号,就可以重新打开日志文件 实现 #/bin/bash #备份日志的路径...bakpath='/home/nginx/logs' #nginx日志路径 logpath='/usr/local/nginx/logs' #在备份路径下创建年月子目录 mkdir -p $bakpath.../$(date +%Y)/$(date +%m) #移动日志文件到备份路径,并改名为日期格式 mv $logpath/access.log $bakpath/$(date +%Y)/$(date +%...$(date +%Y%m%d).log #用 USR1 信号让nginx重新打开日志文件 kill -USR1 `cat /usr/local/nginx/logs/nginx.pid`
应用于:对于不同用户创建的表目录,进行文件的下载,程序中执行hadoop cat命令 下载文件到本地,随后通过ftp传至目标服务器,并将hdfs文件目录的修改时间存入mysql中。...每次修改前将mysql中记录的数据,与本批次下载的HDFS文件路径修改时间对比,如果改变,则决定是否下载文件: 入口: 1 package edm.spark.download.edm.spark.download...+ pathName 36 + " " + tableName); 37 // 更新mysql中记录的时间...jdbcForTime.updateDateTime(insertTime, pathName); 45 } else { 46 // 第一次插入写入当前文件目录时间...} 88 } 89 90 return paths; 91 } 92 93 /** 94 * 查找文件目录属于哪个用户
--定义日志文件的存储地址 勿在 LogBack 的配置中使用相对路径 --> 10MB <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy...,这里里面记录了你的项目运行时候的<em>日志</em>,<em>按</em>大小和<em>时间</em>分割。
上一篇学习了crontab计划任务,接下来就利用这个来备份日志,只要用到的其实就是cp命令。...首先需要备份的日志目录:/var/log/alternatives.log 备份到tmp/logss下 备份文件后面以时间戳结尾date +%Y%m%d%H%M%S 操作如下: 1、准备一个Shell脚本...#备份日志altenatives.log到/tmp/logss路径下 echo ${mypath} ${mypath}/${time} #回应 执行脚本 ?.../test.sh #需要给这它赋与权限,可读可写可执行,参考Linux 文件和文件夹权限 2、crontab定时任务 ? ? 查看定时任务 # crontab -l #查看定时任务 ?...3、重启crond # service crond reload 这样就实现了一分钟一次的日志备份,事实上就是一个copy。
需求场景:将云上一台Linux服务器文件备份到本地服务器,一周一备即可。 面对这样一个需求,我们可能面临如下一些问题。 1、备份方式:是云服务器推文件到本地服务器写入,还是本地服务器从云服务器拉文件?...这里涉及的是文件备份,且实时性要求不高,最笨拙的方式就是人工备份,由相关管理人员通过主动的方式手工备份文件到本地服务器。但这是懒人的时代,机器能做的,干嘛用手来呢,我们来一起看看自动备份实现的方案。...方案二:FTP 说起文件传输备份,首先想到就是FTP,FTP是用于网络上进行文件传输的一套标准协议,但使它声名狼藉的问题是它以明文方式传输密码和文件内容,只要在网络中对FTP连接进行监控就能被窃取。...lftp lftp -u username,password sftp://192.168.204.130 << EOF cd /tmp mget *.* bye EOF 方案四:rsync rsync是linux...rsync默认使用"quick check"算法,它会比较源文件和目标文件(如果存在)的文件大小和修改时间mtime,如果两端文件的大小或mtime不同,则发送端会传输该文件,否则将忽略该文件。
4、cron:定时任务日志,记录了定时任务(cron任务)的执行情况,包括任务的启动和完成时间。通常位于 /var/log/cron。...查看日志文件使用 cat 查看日志文件cat /var/log/messages这将简单地显示整个日志文件的内容。如果日志文件很长,可能需要滚动浏览。...按下 q 键退出 less,可以按空格实现翻页,按 b 键向上翻页。...这将显示最近登录会话的列表,显示用户名、终端、远程主机(如果适用)、登录时间和注销时间。...信息按顶部的最新登录进行排序。lastlog此命令将显示系统上所有用户的上次登录时间。它显示用户名、端口和用户上次登录的时间。它可以成为检查所有用户的最后登录记录的有用工具。
在日常管理中,我们有许多工具可以用来备份文件权限,如cp、rsync、etckeeper等。如果你使用了这个备份工具,那么你的确不需要担心改变的文件权限问题。...但如果只是想暂时备份文件权限(而不是文件本身),例如:为了阻止一些目录的内容被覆盖暂时移除该目录下所有文件写的权限;或是正在排除文件权限问题的过程中需要对文件进行chmod命令操作。...在这些情况下,我们可以在原始文件权限改变之前对其进行备份,一会我们需要它的时候再将原始权限还原。在很多情况下,如果你只是想要备份文件的权限,那么完整的文件备份是不必要的。...在Linux上,实际上备份和恢复文件权限使用访问控制列表(ACL)是容易的。ACL根据不同的属主和属组在兼容posix的文件系统上定义了单个文件的权限。 ?...---- 安装ACL工具 在Debian, Ubuntu,Linux Mint上 $ sudo apt-get install acl 在CentOS,Fedora,RHEL上 $ sudo yum install
登录mysql终端 mysql -uroot -p 输入密码: 进入mysql> 1.日志文件路径 mysql> show variables like ‘general_log_file...localhost.log | ±-----------------±-----------------------------------+ 1 row in set (0.00 sec) 2.错误日志文件路径...data/localhost.err | ±--------------±-----------------------------------+ 1 row in set (0.00 sec) 3.慢查询日志文件路径
在 Linux 系统选有相当多的压缩命令可以使用,这些压缩指令可以让我们更方便的从网上下载大型文件,本章第一节内容我们就来谈谈这个 Linux 系统下常用的几种压缩格式吧....《鸟哥的Linux私房菜 (基础学习篇 第三版)》 - 作者:鸟哥 《Linux就该这么学》 - 作者:刘遄 Linux 文件压缩 你是否有过文件文件太大,导致无法以U盘将他复制完成的困扰,还有你是否有过要备份某些重要数据...好用来对照着解压缩啊,也就是说,虽然 Linux 文件的属性基本上是与文件没有绝对关系的,但是为了好区分这些文件使用的是那种压缩技术,从而出现了拓展名,下面是 Linux 系统下常用的一些压缩格式....,据统计gzip命令对文本文件有60%~70%的压缩率,减少文件大小有两个明显的好处,一是可以减少存储空间,二是通过网络传输文件时,可以减少传输的时间....-n #压缩时,不保存原来的文件名称及时间戳 -N #压缩时,保存原来的文件名称及时间戳 -q
\d{4}-\d{2}-\d{2})' $ymd; default 'date-not-found'; } } 2、对应站点的server里增加日志文件位置配置 server...lcoal/nginx/logs/xxx.com/access-$logdate.log; error_log /usr/lcoal/nginx/logs/xxx.com/error.log; } 注:日志文件目录一定要有读写权限
MongoDB配置按天存储日志文件 2017年11月28日 10:14:39 羊子雄起 mongodb默认不提供直接按天来输出日志文件的配置,但是提供一个日志清理的命令:logRotate。...password'); db.runCommand({logRotate:1}); 必须要进到admin库中才生效,如果配置auth需要填写用户名和密码 执行完毕后会在logpath目录中生成一个当前时间节点的备份文件...,并且原来的日志文件内容会被清除掉。...具体的logRotate的介绍见:http://docs.mongodb.org/manual/tutorial/rotate-log-files/ 在生产环境上不可能每天定时由人工来执行日志文件清理,...,0点到0点20分左右 ,日志是空的。
1.删除比当前时间小的日志文件 ------------------------------成功的脚本。...目的:是删除比当前时间小的日志文件---------------------------- 执行脚本的方式: sh auto-del-log.sh [doudou@centosaly workspace...fi done 2.通过传参的方式,删除指定日期以前的日志 ----------------------通过传参-$1的方式,删除指定时间之前的日志---------------------...fi done 3.常规的删除日志的脚本 删除30天之前的日志 --------------------常规的解决办法-------------------------------- find...if [ "$t11" -gt "$t2" ];then 2个比较的变量 前后都必须有空格,不然会报语法错误 2.date 日期比较 实际是根据时间戳比较的 3.分割:加深理解下!!!
Linux下一个文件有三个主要的变动时间,mtime,ctime,atime: mtime(modification time):当文件的内容更改时,就会更新这个时间。...ctime(status time):当文件的状态被更改时,会更改这个时间,比如像文件的权限或者属性被更改时就会更改这个时间。...atime(access time):就是文件访问时间,当文件的内容被读取时就会更改这个时间。比如使用cat指令读取某个文件时,这个时间就会被更改。...有时候由于时区等问题,你的文件时间可能和标准时间不一致,这个时候就可以使用touch指令来修改文件时间。...这个指令会修改文件的三个时间,当文件不存在时会创建文件 touch -a 文件名 这个指令我使用man来查看时,上面说明只会修改文件的访问时间,但是在实际操作的时候发现除了mtime每变之外,atime
关于moonwalk moonwalk是一款专为红队研究人员设计的痕迹隐藏工具,在该工具的帮助下,广大研究人员可以在针对Linux系统的漏洞利用或渗透测试过程中,不会在系统日志或文件系统时间戳中留下任何痕迹...该工具能够保存渗透测试之前的目标系统日志状态,并在测试完成后恢复该状态,其中包括文件系统时间戳和系统日志,而且也不会在后渗透过程中留下Shell的执行痕迹。...功能介绍 1、可执行文件体积小:轻松使用 curl获取工具; 2、运行速度快:可以在五毫秒内执行包括日志记录、痕迹清理和文件系统操作在内的所有会话命令; 3、网络侦查:保存系统日志状态,moonwalk...会寻找一个全局可写的路径,并将会话存储在该路径中,然后在会话结束之后清理该目录; 4、Shell历史记录:moonwalk不会直接清理整个历史记录文件,而是将其恢复到测试之前的状态; 5、文件系统时间戳...,此时你需要使用下列命令来记录和存储相关文件的访问/修改时间戳: $ moonwalk get ~/.bash_history 操作完成后,可以使用下列命令清理痕迹,并关闭会话: $ moonwalk
在 Windows 下,一个文件有创建时间、修改时间、访问时间。而在 Linux 下,一个文件也有三种时间,分别是访问时间(Access)、修改时间(Modify)、状态改变时间(Change)。...可以使用 stat 命令查看文件的访问时间、修改时间和状态改变时间。 很不幸,Linux 目前常见的文件系统是没有存储文件创建时间的,比如 ext3 就没有存储。...但是,如果文件创建后就没有修改过,修改时间=创建时间;如果文件创建后,状态就没有改变过,那么状态改变时间=创建时间;如果文件创建后,没有被读取过,那么访问时间=创建时间,当这个基本不太可能。...比如我们使用vi打开文件但不编辑,那么退出后文件的访问时间就会改变; 比如我们使用vi打开文件并且编辑后保存退出,那么文件的修改时间就会改变,当然访问时间也改变了; 再比如使用chmod +x给文件增加可执行的属性...,那么文件的状态改变时间就会改变。
微信图片_20200220133741.jpg 在我们进行系统运维的时候,会需要去查看系统下文件的一些时间属性,如创建时间、修改时间等,比如查看一个应用的配置文件的修改时间,用于初步判断该文件是否被篡改过...那么本文就针对Linux系统下的文件的时间属性来做一个介绍。 文件的时间属性 在Linux系统下,文件的时间属性主要分为三种: 访问时间 atime: 也就是Access time。...(实际操作中,出现过atime不变的情况) 利用时间属性的常见操作 结合find命令查找特定时间要求的文件,例如查询最近24小时内修改过的文件:find /data -mtime 24 ?...;并介绍借由ll命令查看文件的时间属性;再演示触发更新时间的几个命令的效果;分享利用时间属性的一般常见操作;最后提供时间属性的系统优化的操作给大家参考。...以上是本文对进行系统运维时,查看Linux系统下文件的时间属性的分享,希望对大家有帮助。 作者:何立
Linux中按文件大小选择性复制文件 在Linux或类Unix系统中,我们经常需要根据特定条件来管理文件,例如按文件大小选择性地复制文件。...使用find和cp命令按文件大小复制文件 以下是一个实用的示例命令,它会搜索指定目录下所有小于200MB的文件,并将它们复制到另一个目录: find /path/to/source -type f -size...• -type f:此选项指定只查找文件,不包括目录。 • -size -200M:这里我们查找小于200MB的文件。注意负号-表示“小于”。...• -exec:后面跟随的是对找到的每个文件要执行的命令。 • cp --parents {} /path/to/destination:这条命令用于复制文件。...总结 通过结合使用find、cp以及可能的xargs,我们可以在Linux/Unix系统中灵活地根据文件大小来选择性地复制文件。记得在实际使用时替换命令中的路径,并检查相关权限设置。
上一篇文章 Linux下使用ssh密钥实现无交互备份 这篇来说说如何安全的备份,还有一点不同的是上一篇是备份服务器拉取数据,这里要讲的是主服务器如何推送数据实现备份。...一、备份服务器配置rsync文件 vi /etc/rsyncd.conf #工作中指定用户(可以不指定为0) uid = 0 gid = 0 #相当于黑洞.出错定位 use chroot = no #有多少个客户端同时传文件...max connections = 200 #超时时间 timeout = 300 #进程号文件 pid file = /var/run/rsyncd.pid #日志文件 lock file = /var.../run/rsync.lock #日志文件 log file = /var/log/rsyncd.log #模块开始 #模块名称随便起(可以是多个) [backup] #需要备份的目录 path = /...rsync.password 二、备份服务器配置虚拟用户的密码文件 [root@slave /]# echo "rsync_backup:123456" >/etc/rsync.password [root
领取专属 10元无门槛券
手把手带您无忧上云