rsync 本地备份月周天小时

作者: Tscccn | 日期: 2022 年 08 月 22 日 | 围观: 307次+ | 没有评论

本地同步备份

#!/bin/bash
#author kinggoo
# shell.sh [hourly|daily|weekly|month]
#inotify-slave的ip地址
backupdatapath="/data2/backupdata/"
dsrc="${backupdatapath}htdocs"
#本地监控的目录
src=/data1/htdocs/
#exclude-from
excludeFrom="/var/spool/cron/rsync.exclude"
#日志
log="${backupdatapath}/log/`date  +%Y%m`"
inotify_home=/usr/bin/
#inotify的安装目录

if [ ! -e "${inotify_home}/inotifywait" ] \
|| [ ! -e "/usr/bin/rsync" ];
then
echo "Check File and Folder"
exit 9
fi

if [ ! -d "${backupdatapath}/log/" ];
then
    mkdir "${backupdatapath}/log/"
fi

if [[ "0"$1 == "0" ]];then
    echo  "shell file.sh [hourly|daily|weekly|month]"
    exit 9
fi

case "${1}" in
"hourly")
        dsrc=${dsrc}.hourly
        echo "`date +%F\ %T` - rsync every 8 hours" >> $log
        ;;

"daily")
        dsrc=${dsrc}.daily
        echo "`date +%F\ %T` - rsync daily" >> $log
        ;;

"weekly")
        dsrc=${dsrc}.weekly
        echo "`date +%F\ %T` - rsync weekly" >> $log
        ;;

"month")
        dsrc=${dsrc}.month
        echo "`date +%F\ %T` - rsync month" >> $log
        ;;

"year")
        dsrc=${dsrc}.year
        echo "`date +%F\ %T` - rsync year" >> $log 
        ;; 
esac

if [ ! -d "$dsrc" ];
then
    echo "Backupdata folder not found."
    exit 9
fi

#  rsync -avzP --delete --timeout=100 --password-file=${rsync_passfile} $src $user@$host01::$dst >/dev/null 2>&1
cd $src && /usr/bin/rsync -aruztD -R --delete  --exclude-from=${excludeFrom}  --timeout=100 ./ $dsrc >/dev/null 2>&1
echo "rsync done `date +%F\ %T` ${1}" > ${dsrc}/sync.log
exit 0

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

#!/bin/bash

#author kinggoo

# shell.sh [hourly|daily|weekly|month]

#inotify-slave的ip地址

backupdatapath="/data2/backupdata/"

dsrc="${backupdatapath}htdocs"

#本地监控的目录

src=/data1/htdocs/

#exclude-from

excludeFrom="/var/spool/cron/rsync.exclude"

#日志

log="${backupdatapath}/log/`date +%Y%m`"

inotify_home=/usr/bin/

#inotify的安装目录

if [ ! -e "${inotify_home}/inotifywait" ] \

|| [ ! -e "/usr/bin/rsync" ];

then

echo "Check File and Folder"

exit 9

fi

if [ ! -d "${backupdatapath}/log/" ];

then

mkdir "${backupdatapath}/log/"

fi

if [[ "0"$1 == "0" ]];then

echo "shell file.sh [hourly|daily|weekly|month]"

exit 9

fi

case "${1}" in

"hourly")

dsrc=${dsrc}.hourly

echo "`date +%F\ %T` - rsync every 8 hours" >> $log

;;

"daily")

dsrc=${dsrc}.daily

echo "`date +%F\ %T` - rsync daily" >> $log

;;

"weekly")

dsrc=${dsrc}.weekly

echo "`date +%F\ %T` - rsync weekly" >> $log

;;

"month")

dsrc=${dsrc}.month

echo "`date +%F\ %T` - rsync month" >> $log

;;

"year")

dsrc=${dsrc}.year

echo "`date +%F\ %T` - rsync year" >> $log

;;

esac

if [ ! -d "$dsrc" ];

then

echo "Backupdata folder not found."

exit 9

fi

# rsync -avzP --delete --timeout=100 --password-file=${rsync_passfile} $src $user@$host01::$dst >/dev/null 2>&1

cd $src && /usr/bin/rsync -aruztD -R --delete --exclude-from=${excludeFrom} --timeout=100 ./ $dsrc >/dev/null 2>&1

echo "rsync done `date +%F\ %T` ${1}" > ${dsrc}/sync.log

exit 0

crond计划

0 3,11,15 * * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh hourly
0 0 * * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh daily
58 3 * * fri /usr/bin/sh /var/spool/cron/inotify_backupdata.sh weekly
30 6 2 * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh month
10 1 2 1,7 * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh year

1

2

3

4

5

0 3,11,15 * * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh hourly

0 0 * * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh daily

58 3 * * fri /usr/bin/sh /var/spool/cron/inotify_backupdata.sh weekly

30 6 2 * * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh month

10 1 2 1,7 * /usr/bin/sh /var/spool/cron/inotify_backupdata.sh year

[……]

继续阅读

转 sed的用法

作者: Tscccn | 日期: 2022 年 04 月 15 日 | 围观: 597次+ | 没有评论

sed在处理文本时是逐行读取文件内容，读到匹配的行就根据指令做操作，不匹配就跳过。 sed是Linux下一款功能强大的非交互流式文本编辑器，可以对文本文件进行增、删、改、查等操作，支持按行、按字段、按正则匹配文本内容，灵活方便，特别适合于大文件的编辑。本文主要介绍sed的一些基本用法，并通过shell脚本演示sed的使用实例。 1.sed的使用方法，调用sed 命令的语法有两种：一.在命令行指定sed指令对文本进行处理：sed +选项 ‘指令’ 文件二.先将sed指令保存到文件中，将该文件作为参数进行调用：sed +选项 -f&#16[……]

继续阅读

（一个村的希望）配合pac方式+小飞机客户端方式SSR+privoxy+nginx转发出门的学习思路

作者: Tscccn | 日期: 2019 年 07 月 18 日 | 围观: 29063次+ | 1 条评论

思路仅供参考。。。仅测试、练习、学习、参考，如有违规删之。

如果有拷贝，请留下链接地址。

你是村里的骄傲~

针对题目有两个方式：

一种是买完ssr服务后，在本地局域网搭建一台母机。然后在母机上搭建sslocal，在使用privoxy将本地全局http转sock。

另一种，买完 ssr后，如果密码和端口一样，直接使用nginx做负载转发即可，省事便捷（非限客户端情况下）。

如果不妥之处，请告知，相互学习。

安装 pip

yum install -y pip

1	yum install -y pip

yum安装不管用的话

curl "https://bootstrap.pypa.io/get-pip.py" -o "get-pip.py"
python get-pip.py

1 2	curl "https://bootstrap.pypa.io/get-pip.py" -o "get-pip.py" python get-pip.py

S[……]

继续阅读

检测Mysql、php-fpm进程任务(临时怼两个简单的脚本)

作者: Tscccn | 日期: 2018 年 09 月 27 日 | 围观: 3025次+ | 没有评论

因为阿里的原因，导致疏忽被工信部把备案号取消了，身份证到期还没办法更新备案信息，坑爹！临时借用好朋友服务器来使用，环境搭建急急忙忙，导致偶尔会有各种小状况出现，所以临时怼两个简单的脚本。检测Mysql

#!/bin/bash
count=`/usr/bin/pgrep mysql|wc -l` 
if (($count<=1));then
#- 条件数字1根据情况自己设置
        /usr/bin/pkill mysql
        sleep 3 
        /usr/bin/systemctl restart mariadb.service
        echo -e  "`date +\%F\ \%T`\tmysql\trestart\t$count" >> /tmp/log
fi

1

2

3

4

5

6

7

8

9

#!/bin/bash

count=`/usr/bin/pgrep mysql|wc -l`

if (($count<=1));then

#- 条件数字1根据情况自己设置

/usr/bin/pkill mysql

sleep 3

/usr/bin/systemctl restart mariadb.service

echo -e "`date +\%F\ \%T`\tmysql\trestart\t$count" >> /tmp/log

fi

检测PHP

#!/bin/bash
count=`/usr/bin/pgrep php|wc -l` 
if (($count<=6));then 
#- 条件数字6根据自己情况设置
        /usr/bin/pkill php
        nohup /usr/sbin/php-fpm2 -y /etc/php-fpm2.conf >/dev/null 2>&1 &
        sleep 3 
        nohup  /usr/sbin/php-fpm1 -y /etc/php-fpm1.conf >/dev/null 2>&1 &
        echo -e  "`date +\%F\ \%T`\tphp-fpm\trestart\t$count" >> /tmp/log
fi

1

2

3

4

5

6

7

8

9

10

#!/bin/bash

count=`/usr/bin/pgrep php|wc -l`

if (($count<=6));then

#- 条件数字6根据自己情况设置

/usr/bin/pkill php

nohup /usr/sbin/php-fpm2 -y /etc/php-fpm2.conf >/dev/null 2>&1 &

sleep 3

nohup /usr/sbin/php-fpm1 -y /etc/php-fpm1.conf >/dev/null 2>&1 &

echo -e "`date +\%F\ \%T`\tphp-fpm\trestart\t$count" >> /tmp/log

fi

[……]

继续阅读

crond任务内有事无法执行某些命令，如sudo等方式

作者: Tscccn | 日期: 2015 年 12 月 04 日 | 围观: 3760次+ | 没有评论

比如运行tomcat时，使用了非root用户执行，如：

sudo -u tomcat8 -s /bin/bash -c /tomcathome/bin/startup.sh
# 下面是我真实的cron记录
# shell>> */1 * * * * /bin/bash /var/spool/cron/checkTomcatService.cron  > /dev/null 2>&1

1

2

3

sudo -u tomcat8 -s /bin/bash -c /tomcathome/bin/startup.sh

# 下面是我真实的cron记录

# shell>> */1 * * * * /bin/bash /var/spool/cron/checkTomcatService.cron > /dev/null 2>&1

将其添加到crond任务内，你会发现这条任务虽然执行了，并且没有任何错误，但却并没有将tomcat进程启动并后台运行（跟加不加&无关），但直接执行脚本无任何问题。
查找原因，总后排查到是sudo的问题（与没有写/sbin/sudo也无关）

主要排查了这么几个点：

java JDK的环境变量是否存在问题；
PATH 系统环境变量是否存在问题；
查看/var/log/cron日志看有误错误或警告；
将脚本结果输出到空设备 >[……]

继续阅读

通过sohu公共ip库获取本机公网ip

作者: Tscccn | 日期: 2015 年 10 月 28 日 | 围观: 8159次+ | 3 条评论

sohu 获取公网IP地址方式 http://txt.go.sohu.com/ip/soip

python方式

#!/usr/bin/python
# -*- coding:utf8 -*-

import urllib2
import re

url = urllib2.urlopen("http://txt.go.sohu.com/ip/soip")
text = url.read()
ip = re.findall(r'\d+.\d+.\d+.\d+',text)

print ip[0]

1

2

3

4

5

6

7

8

9

10

11

#!/usr/bin/python

# -*- coding:utf8 -*-

import urllib2

import re

url = urllib2.urlopen("http://txt.go.sohu.com/ip/soip")

text = url.read()

ip = re.findall(r'\d+.\d+.\d+.\d+',text)

print ip[0]

shell

echo  $(curl -s http://txt.go.sohu.com/ip/soip)|  grep -P -o -i "(\d+\.\d+.\d+.\d+)"

1	echo $(curl -s http://txt.go.sohu.com/ip/soip)\| grep -P -o -i "(\d+\.\d+.\d+.\d+)"

[……]

继续阅读

使用wget来批量下载FTP数据(http可以访问到的也可以)

作者: Tscccn | 日期: 2015 年 10 月 14 日 | 围观: 9070次+ | 2 条评论

大文件传输的时候有时真的让人苦恼，压缩很费时间，也一样要下载。苦苦寻找，找到可以用wget来批量下载数据。哪怕是文件夹有多级。

运行格式

shell>># wget -nH -m –ftp-user=kinggoo_UserName –ftp-password=kinggoo_FtpPasswd ftp://kinggoo.com:62111/* 参数： -nH ， –no-host-directories 不建立含有远端主机名称的目录
–protocol-directories 在目录中加上通讯协定[……]

继续阅读

tomcat多主机多实例，以及无法加载项目的处理

作者: Tscccn | 日期: 2015 年 02 月 09 日 | 围观: 9726次+ | 5 条评论

文章有些地方可能介绍的不一样，因为我直接本地用nginx做了一个代理。属于本人留存！
还有就是这个已经写了好久了，断断续续修修改改，尽管我已经检查了但可能发到博客上的这份有些位置还是难免忘记解释什么。我及时修正。

当时我遇到一个无法查找到原因的难题，是关于tomcat在运行时被rm -rf掉了（你懂的）。然后使用备份的配置文件重新部署上，发现tomcat可以起来并且不报任何错误，但项目全部都不会被tomcat加载。这个问题困扰了我一天一夜，奋战到早上4点多，测试了无数方法，估计搞出无数的状况，也进行了无数次配置调试。问题原因依然没解决。针对这个问题的解决办法是：把项目重新部署一[……]

继续阅读

描述IT民工在家的故事，记录生活点滴！

rsync 本地备份月周天小时

转 sed的用法

（一个村的希望）配合pac方式+小飞机客户端方式SSR+privoxy+nginx转发出门的学习思路

检测Mysql、php-fpm进程任务(临时怼两个简单的脚本)

crond任务内有事无法执行某些命令，如sudo等方式

主要排查了这么几个点：

通过sohu公共ip库获取本机公网ip

python方式

shell

使用wget来批量下载FTP数据(http可以访问到的也可以)

运行格式

tomcat多主机多实例，以及无法加载项目的处理

文章分类

最新评语

友情连接

我的