写你的shell,其实很简单[架构篇]

  引语:我本人以前并没有写过shell脚本,也许是因为懒,也许是没有被逼到要去写shell的地步。但是,前段时间,工作需求,要求重新跑几个月的脚本,这些脚本是每天定时进行跑的,而且每天是好几个脚本一起关联跑的。你也许会说,这太简单了,写个循环,然后,让他自己去跑就行了。是的,你可以很顺手的用你的编程语言去写循环,如PHP。但是,你知道,这样做其实是改变了代码结构了,鬼知道会导致什么结果呢? 并且,我并不保证里面所有代码的意思,我都懂!那么,问题来了,在不改变原代码的前提下,怎样去循环这几个月的时间呢? 没错,那就是,模拟真实运行时的情况,传入需要接收的日期参数(前提是你的代码里面已经有了这个门)!你知道,这种定时脚本都有一个优雅的名字,crontab,那么,就是shell了,你要做的就是写shell了。

  没有写过shell? 没关系了,其实需求确定之后,你显然已经知道,这太简单了。不就是语法问题吗? 你别告诉我你不会谷歌,不会百度!

  我就先抛几个需要考虑的点,后面直接给代码吧!

    1、怎样获取当前时间,并转换成你需要的格式? 关键词: date

    2、怎样防止同时多次运行同一个内容? 关键词: lock

    3、怎样让程序运行完一次之后,冷却执行? 关键词: sleep

    4、怎样指定运行时间段,counter或者起始日期? 关键词: while,let,expr

    5、附加:怎样知道当前的运行状态如何了? 关键词: echo, progress

  把这些问题考虑好了,你就一步步去写吧,不知道语法的,直接谷歌、百度,代码参考如下:

#/bin/--startDate=<span style="color: #800000;">"<span style="color: #800000;">2015-11-24<span style="color: #800000;">"<span style="color: #000000;"> # when to start
startDateTimestamp
=<span style="color: #0000ff;"&gt;date</span> -d <span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;$startDate</span><span style="color: #800000;"&gt;"</span> +%<span style="color: #000000;"&gt;s
endDate=<span style="color: #800000;">"<span style="color: #800000;">2015-12-14<span style="color: #800000;">"<span style="color: #000000;">   # when to end
endDateTimestamp=<span style="color: #0000ff;"&gt;date</span> -d <span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;$endDate</span><span style="color: #800000;"&gt;"</span> +%<span style="color: #000000;"&gt;s
sleepTime=<span style="color: #800080;">25<span style="color: #000000;">   # to take a break
haveSthUndo=<span style="color: #800080;">0 # check <span style="color: #0000ff;">if there is something undo,<span style="color: #0000ff;">if<span style="color: #000000;"> not,exit the program

rootDir=<span style="color: #800000;">'<span style="color: #800000;">/cygdrive/d/wamp/ppi/<span style="color: #800000;">'
<span style="color: #0000ff;">dir=$rootDir<span style="color: #800000;">"<span style="color: #800000;">cron/<span style="color: #800000;">"<span style="color: #000000;">

itemArr=(<span style="color: #800000;">"<span style="color: #800000;">itemA<span style="color: #800000;">" <span style="color: #800000;">"<span style="color: #800000;">itemB<span style="color: #800000;">" <span style="color: #800000;">"<span style="color: #800000;">itemC<span style="color: #800000;">"<span style="color: #000000;">) # the items you want to run there
<span style="color: #0000ff;">for item <span style="color: #0000ff;">in<span style="color: #000000;"> ${itemArr[@]}
<span style="color: #0000ff;">do<span style="color: #000000;">
runFile=$rootDir$item<span style="color: #800000;">"<span style="color: #800000;">.run<span style="color: #800000;">"<span style="color: #000000;">;
<span style="color: #0000ff;">if [ ! -f <span style="color: #800000;">"<span style="color: #800000;">$runFile<span style="color: #800000;">" ] ; <span style="color: #0000ff;">then<span style="color: #000000;">
haveSthUndo=<span style="color: #800080;">1<span style="color: #000000;">;
<span style="color: #0000ff;">echo $item<span style="color: #800000;">"<span style="color: #800000;"> runs on me<span style="color: #800000;">" $runFile <span style="color: #800000;">"<span style="color: #800000;"> touched<span style="color: #800000;">"<span style="color: #000000;">;
<span style="color: #0000ff;">echo -e <span style="color: #800000;">"<span style="color: #800000;">script startTime: <span style="color: #800000;">"<span style="color: #0000ff;"&gt;date</span> <span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;+%Y-%m-%d %H:%M:%S</span><span style="color: #800000;"&gt;"</span> <span style="color: #800000;">"<span style="color: #800000;">\nbeginDate:<span style="color: #800000;">" $startDate <span style="color: #800000;">"<span style="color: #800000;">\nendDate:<span style="color: #800000;">" $endDate <span style="color: #800000;">"<span style="color: #800000;">\npath:<span style="color: #800000;">" $<span style="color: #0000ff;">dir >><span style="color: #000000;"> $runFile
<span style="color: #0000ff;">touch <span style="color: #800000;">"<span style="color: #800000;">$runFile<span style="color: #800000;">"<span style="color: #000000;">;
break;
<span style="color: #0000ff;">else
<span style="color: #0000ff;">echo $item <span style="color: #800000;">"<span style="color: #800000;">is runing,skipped. <span style="color: #800000;">"<span style="color: #000000;"> $runFile;
<span style="color: #0000ff;">fi
<span style="color: #0000ff;">done<span style="color: #000000;">;
<span style="color: #0000ff;">if [ $haveSthUndo -ne <span style="color: #800080;">1 ]; <span style="color: #0000ff;">then
<span style="color: #0000ff;">echo -e <span style="color: #800000;">"<span style="color: #800000;">Nothing to do now ...\ncheck it...<span style="color: #800000;">"<span style="color: #000000;">;
exit;
<span style="color: #0000ff;">fi
<span style="color: #0000ff;">echo <span style="color: #800000;">"<span style="color: #800000;">haveSthUndo eq: <span style="color: #800000;">"<span style="color: #000000;"> $haveSthUndo;

<span style="color: #0000ff;">while [[ $endDateTimestamp -<span style="color: #000000;">ge $startDateTimestamp ]]
<span style="color: #0000ff;">do<span style="color: #000000;">
runDate=<span style="color: #0000ff;"&gt;date</span> -d @$startDateTimestamp +%Y-%m-%d; #<span style="color: #800080;">1987-<span style="color: #800080;">01-<span style="color: #800080;">06<span style="color: #000000;">
params=<span style="color: #800000;">"<span style="color: #800000;">item=$item&d=$runDate<span style="color: #800000;">"<span style="color: #000000;">;
msg=<span style="color: #800000;">"<span style="color: #800000;">[date </span><span style="color: #800000;"&gt;"</span>+%Y-%m-%d %H:%M:%S<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;] now we run the date: <span style="color: #800000;">"${runDate}<span style="color: #800000;">"<span style="color: #800000;"> [params]: <span style="color: #800000;">"<span style="color: #000000;">${params};
<span style="color: #0000ff;">echo<span style="color: #000000;"> $msg; # to show me ...
<span style="color: #0000ff;">echo $msg >><span style="color: #000000;"> $runFile;

# run the scripts below
cd $</span><span style="color: #0000ff;"&gt;dir</span> &amp;&amp;<span style="color: #000000;"&gt;
    /bin/php .</span>/script1.php $params &amp;&amp;<span style="color: #000000;"&gt;
    /bin/php .</span>/script2.php $params &amp;&amp;<span style="color: #000000;"&gt;        
    /bin/php .</span>/<span style="color: #000000;"&gt;scriptx.php $params
# run the scripts upon

startDateTimestamp</span>=`<span style="color: #0000ff;"&gt;expr</span> $startDateTimestamp + <span style="color: #800080;"&gt;86400</span><span style="color: #000000;"&gt;`;        # run the next day ...

</span><span style="color: #0000ff;"&gt;echo</span> <span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;  ___sleeping for $sleepTime seconds ... </span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt;;
x</span>=<span style="color: #800000;"&gt;''</span><span style="color: #000000;"&gt;;
</span><span style="color: #0000ff;"&gt;for</span> ((itime=<span style="color: #800080;"&gt;0</span>; itime<$sleepTime; itime++)); <span style="color: #0000ff;"&gt;do</span><span style="color: #000000;"&gt;
    let itime2</span>=$itime+<span style="color: #800080;"&gt;1</span><span style="color: #000000;"&gt;;
    progress</span>=`<span style="color: #0000ff;"&gt;expr</span> $itime2 \* <span style="color: #800080;"&gt;100</span> /<span style="color: #000000;"&gt; $sleepTime`;
    printf </span><span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;cooling:[%-</span><span style="color: #800000;"&gt;"</span>$sleepTime<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;s]%d%%\r</span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt; $x $progress
    x</span>=<span style="color: #000000;"&gt;#$x
    </span><span style="color: #0000ff;"&gt;sleep</span> <span style="color: #800080;"&gt;1</span>;                            # <span style="color: #0000ff;"&gt;sleep</span> xx seconds to run the next <span style="color: #0000ff;"&gt;time,show the progress</span>
<span style="color: #0000ff;"&gt;done</span><span style="color: #000000;"&gt;;
</span><span style="color: #0000ff;"&gt;echo</span><span style="color: #000000;"&gt;;

<span style="color: #0000ff;">done<span style="color: #000000;">;
<span style="color: #0000ff;">echo <span style="color: #800000;">"<span style="color: #800000;">[date </span><span style="color: #800000;"&gt;"</span>+%Y-%m-%d %H:%M:%S<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;] the end.<span style="color: #800000;">" >><span style="color: #000000;"> $runFile;

end of the <span style="color: #0000ff;">file

  附录:

  根据本人初涉shell,遇到的问题例举如下,希望可以减少大家走弯路的时间:

  1、整个shell脚本,其实就相当于你在终端输入的一系列命令,如果想在shell里做什么,就先想想在终端可以做什么吧,字符的的连接,就是直接用 "" 双引号,输出,变量定义无 $ 符号,但是使用时一定要加上 $ 符号。

  2、"="  赋值符号,两边一定不能有空格,这和其他语言有区别,尤其是你还有自己代码美观风格时特别注意,否则会报语法错误!

  3、for 中的数组内容是以 " " 空格分隔,而非 "," 逗号分格

  4、条件判断 [ true ] 中括号 后面需要有一个空格,但是两个中括号之间不能有空格如 [[ true ]]

  5、while 条件判断可以用 () 括号,也可以用 [[ ]] 中括号

  6、如果用windows写shell,一定要注意换行符格式 \n 而非 \r\n , 需要借助一些编辑器(如notepad++)更改换行符格式!

  终了: 其实,语言只是一种工具,永远不会太难(太难也不会有人用啊),真正能让工具工作起来的,是你的思想!

  其实很简单,Just do it . 

<div class="cnblogs_code">

  [ root @my-pc ]$  urScripts.    #see you next 

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


系ubuntu 下面打开终端输入:sudo apt-get install sendmail一般就安装完成噶啦跟住进入 /etc/mail/目录输入:m4 sendmail.mc &gt; sendmail.cf意思系跟住.mc文件 生成 sendmial.cf文件输入呢个命令:ps aux | g
依家我有1个软件goagent目录(大家懂得) 放在/home/gateman/Programs/ 下 1. proxy.py 入面有1个 proxy.py 文件 放在/home/gateman/Programs/goagent/local/ 入面 2.breakwall.sh 我在 proxy.p
其实我想讲的是 cp -L关于-L参数的解释:-L, --dereference always follow symbolic links in SOURCE意思是如果复制目标是1个软链接,则复制链接的目标 不是链接本身做个例子: 例如 ~/tmp/fo1 入面有1个c.txt 文件 和 指向他的软
原地址:http://www.rjgc.net/control/content/content.php?nid=4418 1、将文件checkout到本地目录svn checkout path(path是服务器上的目录)例如:svn checkout svn://192.168.1.1/pro/do
chroot,即 change root directory (更改 root 目录)。在 linux 系统中,系统默认的目录结构都是以 `/`,即是以根 (root) 开始的。而在使用 chroot 之后,系统的目录结构将以指定的位置作为 `/` 位置。实例:用live CD ubuntu假设你的
简单解析下, stdin就是标准输入, stdout就是标准。举个例子, 在当前我要打包1个文件夹 /var/log/ 到当前目录下,并用zip压缩,那么我们可以分步执行#tar -cvf log.tar /var/log/#zip -r log.tar.zip log.tar#rm -rf log
转自:http://man.ddvip.com/linux/Mandrakelinuxref/process-priority.html系统中运行的每个进程都有一个优先级(亦称“nice 值”),其范围从 -20 (最高优先级)到 19 (最低优先级)。默认情况下,进程的优先级是 0 (“基本”调度
str=&quot;/home/gateman&quot; if [ ${str:0:1} = &quot;/&quot; ]; then echo &quot;yes&#39;fi ${str:0:1} 中0表示从第几个字符开始,1表示截取多长
转自:http://kwokchivu.blog.51cto.com/1128937/694347 在RedHat系统下用usermod 命令可把某用户添加进多个附属组,默认情况下,一次性添加多个附属组可用以下方式来添加: usermod -G 附属组1,附属组2,...,附属组X 用户名 但在添加
有个文件 test.txt 内容如下:bash-3.00$ cat test.txt user user user_hiuser #注:呢行系空行T JGATEMANGATTTTTEMANGABBEMANAAABbash-3.00$下面介绍下常用的通配符 配合grep 命令:1. &quot;.&q
linux系统为每1个文件都分配有i索引节点(inode),系统根据呢d节点从磁盘找出数据。 一般来讲,每1个文件名(包含全路径)实际上都链接住1个i索引节点。inode实际上系乜咧? 其实可以算系1个指向磁盘具体位置(柱面,扇区之类)的指针, 系统分析某个文件的inode,得出磁盘柱面,扇区等数据
grep 可以立即为筛选, 一般的用法系 grep + 要查询的字段 + 文件(或者内容 例如| 传递既内容)1.grep + 要查询的字段 + 文件gateman@GPC:~/shell/SQL_GSI$ grep OID a.sqlWHERE OID=@BuildNOWHERE OID INWH
原文转自:http://www.ibm.com/developerworks/cn/linux/l-cn-vimcolumn/index.html开始之前人类大脑对文字的处理是平面式的,所以我们浏览文章、查找资料或者重构代码,要么是横向读,要么是纵向读,要么使用搜索功能,将文字作为一个平面整体。而在
PS:偶很喜欢用scp这个命令来传输数据。scp命令跟cp命令类似,只不过cp命令是在同一台机器上用的,scp是在两台机器上复制传输数据的命令。scp实质相当于利用SSH协议来传输数据的cp命令。 用法举例: 1、复制远程服务器的文件到本地: scp -P888 root@120.18.50.33:
打开终端,进入/bin/ls 一下会见到 bash sh 呢两个文件。其实距地系两个唔同既shell 解析器。如果在脚本a.sh 开头写入#!/bin/sh那么执行./a.sh 时候 就相当于 sh a.sh同理 开头写入#!/bin/bash执行./a.sh 时候 就相当于 bash a.sh如果
find查找文件的时候排除某个或几个文件或目录转自:http://www.cnblogs.com/starspace/archive/2008/10/20/1315380.html比如要在/usr/sam目录下查找不在dir1子目录之内的所有文件find /usr/sam -path &quot;/
假设有变量 var=http://www.google.com/test.htm一 # 号截取,删除左边字符,保留右边字符。echo ${var#*//}其中 var 是变量名,# 号是运算符,*// 表示从左边开始删除第一个 // 号及左边的所有字符即删除 http://结果是 :www.goog
转自: http://edyfox.codecarver.org/html/_vimrc_for_beginners.htmlVIM 中可供用户定制的选项非常非常多,作为初学者,我们没有必要了解这么多东西。下面,滇狐简单列出了一些最常用的配置项,大家可以根据自己的需要将这些内容添加到自己的 .vim
转自:http://www.einit.com/user1/11/archives/2006/3603.htmlUnix/Linux下一般想让某个程序在后台运行,很多都是使用 &amp; 在程序结尾来让程序自动运行。比如我们要运行mysql在后台: /usr/local/mysql/bin/mysq
首先, mount是类unix系统, 挂载设备到1个文件夹的操作命令, 注意系设备阿正常来讲,mount 是不能挂在文件夹到文件夹的。例如, 在我的~/tmp/ 目录中有两个文件夹fo1 fo2其中fo1 中有3个文件a.txt b.txt c.txt fo2 有4个 e.txt d.txt e.t