月度归档:2016年04月

shell-character

Bourne-Again SHell是绝大多数linux系统下默认的shell,只要涉及linux平台上的研发和维护,都或多或少的会接触Bash的CLI.
Bash shell确实十分强大,在linux的平台上,几乎无所不能,但对于新手来说,还是有许多需要注意的地方.
下面的知识适合刚接触bash,却还不熟练的同学.

bash shell是对字符非常敏感的脚本语言.
*以下所有命令均在CentOS Linux release 7.2.1511 (Core)测试,linux内核为3.10.0-327.10.1.el7.x86_64,bash 版本为 GNU bash, version 4.2.46(1)-release (x86_64-redhat-linux-gnu),部分内容可能在其他的linux发行版上有差异.

先来分析linux的分隔符.
shell的默认分隔符存放在变量IFS(Internal Field Seperator)中,下面我们来看看它长啥样(注意输出结果).

[13:56:37 ~]#set -x                #开启命令输出模式,即会输出你键入的命令(包括所有参数)
[13:57:17 ~]#echo -n $IFS
+ echo -n
[13:57:29 ~]#echo -n "$IFS"
+ echo -n ' 	
'
 	
[13:57:37 ~]#echo -n '$IFS'
+ echo -n '$IFS'
$IFS[13:57:42 ~]#

=_=,是不是很奇怪?IFS里面到底放的是些什么?那么我们再看看这个变量的一些信息(你可能需要提前掌握使用bash变量的一些知识点我查看).

[14:05:26 ~]#set +x                #关闭命令输出模式
[14:05:27 ~]echo ${#IFS}
3

看来有三个字符存储在IFS里面,那么挨个挨个的查看下.

[14:08:10 ~]#set -x                #开启命令输出模式
[14:08:10 ~]#echo -n ${IFS:0:1}
+ echo -n
[14:08:11 ~]#echo -n "${IFS:0:1}"
+ echo -n ' '
 [14:08:12 ~]#

到这里,大家应该明白了,第一个字符存储的是空格,linux默认吧空格作为分隔符.
可能还有同学会有疑问,加双引号,和不加双引号,为什么输出不同,这里简单说一下(后面会更详细的说明),在linux中具有非常特别的意义,通常被称呼为强制引用符.即被双引号包括的内容,就一定会被解释,包括空白,所以即使${IFS:0:1}是一个空格,echo 还是会输出这个空格(第六行)!
那么接下来就简单多了.

[14:25:52 ~]#echo -n ${IFS:1:1}
+ echo -n
[14:25:55 ~]#echo -n "${IFS:1:1}"
+ echo -n '	'
	[14:25:59 ~]#

第二个是制表符\t,作为linux默认的第二个分隔符.

[14:27:23 ~]#echo -n ${IFS:2:1}
+ echo -n
[14:34:38 ~]#echo -n "${IFS:2:1}"
+ echo -n '
'

[14:34:42 ~]#

第三个是换行符\n,作为linux默认的第三个分隔符.
讲解分隔符是为了让你进一步了解bash工作的机制.帮助你理解类似下面这样的语句.

#example.sh
array=(a b c)
for i in "${arrary[*]}";do
     echo $i
done
for j in ${array[*]};do
     echo $j
done

*其实在使用数组中,如果某一个成员的内容包含了分隔符,那么在使用${array[*]}往往不是你想要的结果.而${array[@]}却会方便的多.

下面来了解bash的几个特殊字符,包括`
双引号在shell中使用的很多,然而能够熟练使用的人却不多.
回顾下双引号在shell脚本中的使用
赋值变量,当变量包含特殊字符,比如空白字符或者需要使用引用变量的时候

var1="hello world!"        #请注意这条赋值语句
var2="welcome to blog.weskiller.com , $var1"

使用grep awk sed命令

echo $var2|grep "hello world"
echo $var2|sed "s/blog/www/"
echo $var2|awk "{print $3}"

=V=,好像出了什么问题~. 在给var1赋值的时候发生了意想不到的事情.

var1="hello world!"
-bash: !": event not found

这是什么鬼?
新手一定在这里懵逼了,其实在交互式的shell中!会被转义为history,就像下面演示的一样,其实在非交互的shell中,这个功能会被禁用.

[15:41:18 ~/scripts]#history -c
[15:41:21 ~/scripts]#ls
backup.sh  clear_log.sh  test.sh
[15:41:22 ~/scripts]#echo

[15:41:35 ~/scripts]#history 1
    3  history 1
[15:41:41 ~/scripts]#!-1
history 1
    3  history 1
[15:41:44 ~/scripts]#

没错,双引号强制转义了!,而实际上如果不用双引号反而达到了你想要的效果.

var1=hello\ world!              #这里使用反斜线来转义空格,这样就不会被认为是分隔符,所以在shell看来"hello world!"是一个整体
echo $var1 

单引号在使用中往往是要告诉shell,不要乱改我输出的内容,常称呼为弱引用符
就像双引号遇到的情况,用单引号就可以完美的解决

var1='hello world!'

反引号`可谓是shell脚本语言的精华,用过的人都…,我常称之为替换符.
`command` 中的命令会被执行而输出结果会返回,这个和$(command)如出一辙,唯一可能觉得遗憾的是` `不支持调套使用,而$()是可以多次嵌套使用的.
*到现在为止,博主尚未发现` `和$()的使用区别.
在使用反引号的时候注意的是不要被单引号包括,同时反引号外的双引号和反引号内的双引号互不干扰,就像下面这样

timestamp="$(date --date "@$((`date --date "1 days ago" +%s`-2*3600))" +%F\ %T)"                       #取得当前时间间隔为一天两小时的时间戳

讲了这么多,在实际使用中的效果如何?
来看看吧

#定义时间戳,多次复用date命令
today="$(date --date @$(($(date --date "`date +%F`" +%s)-3600*8)) +%F\ %T)"
delete_timestamp="$(date --date @$((`date --date "$today" +%s`+7*3600)) +%F\ %T)"
#巧妙使用单双引号,在sed,awk中插入变量
pattern="`date +%F\ %T`"
grep -P "$parttern" $log
sed -i 's/'"$pattern"'/'"`date +%F`"'/g' $log