标签 C 下的文章

Unix Shell Scripting之'扫盲篇'

俗话说:"工欲善其事,必先利其器"。在Unix/Linux上做开发,这里的’器’也同样包括Unix Shell Script,遗憾亚,虽然自己在Unix上开发已经快2年了,但是对Unix Shell Script可以说是’Script盲’一个,很多稍微复杂些的Script自己根本都看不懂。其实这也是自己栽下的’苦果’,因为以前我一直’歧视’Script language,认为那不是真正程序员该精通的,所以也就没有认真钻研过。目前认识到了解一定的Script技术,可以很大程度提高自己的工作效率,有些小工具用Script实现方便极了。这里’扫盲’一是给自己’扫盲’,二是把这些基础的Script技术和那些对和我一样对Script不熟悉的人一起分享。这篇中的所涉及的Shell语法均为符合POSIX标准的语法,可能很多Shell不能与该语法完全相吻合。自己感觉Bash与POSIX Shell语法最为接近。

首先我们要知道Script Language属于’解释型’语言,其性能要逊于像C、C++这类的编译型语言。但是Script Language由于站在更高的层次,它编写相对简单,编写效率要高于编译型语言,用它来做一些系统管理和辅助性的工作绰绰有余。还有一点值得注意的是Shell script已经被标准化,这就意味着其可移植性相对较好,基本上是’Write Once, Run Everywhere’!

当你打开一个后缀为.sh的文件时,在文件的第一行一般有这样格式的字符串"#!usr/bin/xx",这种script文件叫’Self-Contained Script’,也就是说它可以像可执行程序那样被执行而不用你输入额外的字符,比如有这样的一个简单的’Self-Contained Script’:
/* helloworld.sh */
#! /usr/bin/bash
echo "hello world"
我们编辑完后,再赋予helloworld.sh可执行权限属性,这样我们就可以在命令行上敲入’helloworld’,’hello world’就输出到屏幕上了,更准确的说是标准输出上^_^。

Shell Script实际上是一组’命令’序列,它支持三种基本的命令:
内置命令 — 像cd、read、echo、printf等shell自己使用的一些命令;
Shell函数 — 用Shell Language写的函数,调用方式与外部命令相同;
外部命令 — Shell通过创建一个新的进程来运行这个命令,典型的’spawn’模式 — ‘fork + exec’.

既然Shell Script被称为一门语言,那么它也自然也不例外的拥有变量和相关的控制语句,我们逐一来学习一下。

[Shell变量]
1、定义变量:例如YOUR_VAR1=this_is_my_first_shell_var、YOUR_VAR2="this is my first shell var",对于变量值中间含有空格的,就按照YOUR_VAR2的定义方式,用双引号括上即可。注意在’='两边不允许有空格,否则会解释出错。
2、引用变量:例如echo $YOUR_VAR1、printf "${YOUR_VAR1} ${YOUR_VAR2}\n"、MY_VAR1=$YOUR_VAR1。在引用变量时最好用’{}’将你的变量括起来,否则当Shell解释器遇到这样的语句echo $YOUR_VAR1is,它就不认识了,修改成echo ${YOUR_VAR1}is后,则一切正常了。

[Shell环境变量]
每种Shell都有自己的环境变量,这些变量被该Shell下执行的程序所继承和共享,那我们如何定义环境变量呢?使用export命令。
export varname=value
或者
varname=value
export varname

例如:
/* 在环境变量文件中, Bash中为.bashrc,C Shell中为.cshrc */
hours_per_day=24
seconds_per_hour=3600
export hours_per_day
export seconds_per_hour

这样我们在命令行上敲入echo $hours_per_day后,我们就可以看到24输出在标准输出上了。

[条件分支判断]
Shell条件判断的语句格式:
if condition1
then
 statement1
 statement2
 ……….
elif condition2
then
 statement3
 statement4
 ……..   
else
 statement5
 ……..
fi

Shell Script支持多种判断condition的方法,如果在condition处是一个command, 那么如果该command执行成功,其退出状态(exit status)为0,否则为不等于0的值。当你既要获取command退出状态,而又不想要该command的输出时,有一个常用的技巧,那就是使用’/dev/null’文件设备。熟悉Unix编程的人都知道’/dev/null’文件的作用,这里不多说。看下面的例子:
#! /usr/bin/bash
if ls -l|grep myfile > /dev/null
then
        echo "myfile exists"
else
        echo "myfile doesn’t exist"
fi

在condition处我们大多数情况下都会利用test命令来判断condition,test命令有两种使用方式:
test operand1 operator operand2
或者是
[ operand1 operator operand2 ](省略test)

我们举例说明:

X=3
Y=6
if [ ${X} -lt ${Y} ]
then
        echo "${X} < ${Y}"
else
        echo "${X} > ${Y}"
fi

if test ${X} -lt ${Y}
then
        echo "${X} < ${Y}"
else
        echo "${X} > ${Y}"
fi

test命令提供的operator很是丰富,其中一目operator包括:
-n — operand non zero length
-z — operand has zero length
-d — there exists a directory whose name is operand
-f — there exists a file whose name is operand
二目operator包括:
-eq — the operands are integers and they are equal
-neq — the opposite of -eq
= — the operands are equal (as strings)
!= — opposite of =
-lt — operand1 is strictly less than operand2 (both operands should be integers)
-gt — operand1 is strictly greater than operand2 (both operands should be integers)
-ge — operand1 is greater than or equal to operand2 (both operands should be integers)
-le — operand1 is less than or equal to operand2 (both operands should be integers)

[循环语句]
和C语言类似,Shell也支持for、do..while loop,而且还支持break、continue这样的跳转语句。有了上面的基础理解这两组语句就不难了,看看例子一切都明白了。
e.g.-1
X=0
while [ $X -le 20 ]
do
        echo $X
        X=$((X+1))
done

e.g.-2
colour1="red"
colour2="blue"
colour3="green"
for X in "$colour1" "$colour2" "$colour3"
do
        echo $X
done

e.g.-3
colour4="red blue green"
for Y in $colour4
do
        echo $Y
done

这里e.g.-2和e.g.-3的输出是一样的。

[Shell函数]
Shell函数的定义与C语言也类似,格式如下:
[function] name ()
{
 command-list;
}
Shell Function的使用和外部command一样,不同的是Shell Fucntion运行在Shell进程上下文中,Shell在执行Shell Function时不另外启动一个新的进程。在Shell Function内部,Shell Fucntion参数屏蔽了其Parent Script的参数,见下面的例子:
/* test.sh */
#! /usr/bin/bash
printarglist ()
{
        echo ${1}
        echo ${2}
}
printarglist ${1} upload

执行:test.sh go download
输出:go upload

以上是Shell Script的基本语法结构,权当给自己’扫盲’了,当然Shell Script编程又很多经验和技巧,这需要在以后不断的实践中慢慢摸索了。

遇到系统的高可用性问题

我也是直到最近才接触到'高可用性'这个词儿的,从我所在的项目需求角度出发,我理解'高可用性'就是在系统的外部依赖实体(如主数据库、主网络)等瘫痪了之后,系统仍然能正常的支撑业务的运行,当然系统自己宕掉了,那就没辙了^_^。高可用性设计实际上就是在系统自身完好的情况下如何考虑其外部实体的设计以保证系统能持续的运行支撑下去,起码从我现在正在做的项目的角度来说是可以这样理解的。

目前我们的系统的高可用性主要体现在对数据库的访问机制上。对于24×7小时运行的系统来说,数据库不可避免的需要采用一些容灾机制来保证数据的正确和不丢失或者是将损失减少到最低点。我们的系统采用双机热备的方式,一旦ACTIVE数据库宕掉,我们的系统就应该'自动'切换到STANDBY数据库上。这里就存在一个问题,到底如何切换,又如何在ACTIVE数据库恢复后,重新将数据库切换回到ACTIVE数据库呢?我个人从一开始就想这个切换过程应该对我们的系统保持透明,我们的系统能看到的只有一套用户名、密码和服务名并利用这套配置访问数据库,置于访问到哪一个数据库可由数据库那方来定,这样对于我们的系统来说实现起来会简单很多,但是我们的技术支持组给的答案却是做不到,需要我们的系统自己提供一套行之有效的数据库切换方案。经过研究我们提供这样一套办法:利用一个外部监视程序定时检测主数据库是否可用,这个状态检测程序一旦发现主数据库不可用,就通过一个简单内部通信协议发送一个消息包到我们的系统,我们的系统解析该消息包,做出相应的切换处理,并发送告警通知相关人员;当检测程序一旦发现主数据库可用了,发送另外一个消息包通知我们的系统数据库恢复了。我们的系统中有多个兄弟进程依赖数据库,每个进程都是单独与数据库建立session的,这样一旦需要切换数据库,我们这些可怜的进程就需要做同样的判断流程,可想而知代码中会存在多少的重复或相似的代码段,而且一旦流程修改我势必要修改多处,这样代码中的坏味道儿可就太浓了,势必应该进行重构,记得以前写过这么一篇'C语言也重构',关于C语言重构的一些事项可以到那篇文章中查询。

灵光一闪!突然想到在Java组有数据库连接池的概念,我们可否效仿一下呢,我们也做一个这样的'数据库Session池'或者是一组抽象了的数据库session管理接口,这样对session的管理就集中起来了!session的管理接口负责判断是否需要切换和重新连接数据库,而这些切换操作对那些依赖数据库的进程来说是透明的。这样每个进程在每处理一条消息的时候都去调用一次open_session这样的接口,然后利用打开的session进行数据库操作即可。而open_session这个接口的实现也许要分两种情况:
1、在未切换数据库的情况下,使用原来已经存在的session即可,这里浪费的仅仅是一次条件判断而已;
2、在切换数据库的情况下,重新建立一个连到新数据库的session即可。

感觉这个方案可行,晚些儿时候再认真考虑一下,拿出一套可行方案。其实这里还要考虑这样一种情况也是可能性极其微小的情况,那就是两个数据库都宕了,这时候要考虑高可用性的话,那就该提供一些在没有数据库情况下的默认处理机制或者策略了。

如发现本站页面被黑,比如:挂载广告、挖矿等恶意代码,请朋友们及时联系我。十分感谢! Go语言第一课 Go语言精进之路1 Go语言精进之路2 Go语言编程指南
商务合作请联系bigwhite.cn AT aliyun.com

欢迎使用邮件订阅我的博客

输入邮箱订阅本站,只要有新文章发布,就会第一时间发送邮件通知你哦!

这里是 Tony Bai的个人Blog,欢迎访问、订阅和留言! 订阅Feed请点击上面图片

如果您觉得这里的文章对您有帮助,请扫描上方二维码进行捐赠 ,加油后的Tony Bai将会为您呈现更多精彩的文章,谢谢!

如果您希望通过微信捐赠,请用微信客户端扫描下方赞赏码:

如果您希望通过比特币或以太币捐赠,可以扫描下方二维码:

比特币:

以太币:

如果您喜欢通过微信浏览本站内容,可以扫描下方二维码,订阅本站官方微信订阅号“iamtonybai”;点击二维码,可直达本人官方微博主页^_^:
本站Powered by Digital Ocean VPS。
选择Digital Ocean VPS主机,即可获得10美元现金充值,可 免费使用两个月哟! 著名主机提供商Linode 10$优惠码:linode10,在 这里注册即可免费获 得。阿里云推荐码: 1WFZ0V立享9折!


View Tony Bai's profile on LinkedIn
DigitalOcean Referral Badge

文章

评论

  • 正在加载...

分类

标签

归档



View My Stats