shell实例练习+详解
想着将Shell与Python和Java等脚本比较比较,当一有这个念头我就放弃了。这太侮辱Shell了。(哭笑脸!)
作为一个程序员,Linux那是最基本要求。而shell脚本有时候也会显示它在Linux中独特的魅力,让我们一起来学习学习吧!!!!
我爱学习!!
案例一
打印九九乘法表
>循环语句(for)
>变量计算(加减乘除)
语句:
for i in $(seq ); do for j in $(seq $i); do echo -n "$i*$j=$(($i*$j)) "; done;echo ""; done
结果:
说明:
>for循环:for arg in Range;do CMD;done
循环常见场景:
##1、有限数字(用空格隔开)
for i in 1 2 3 4 5;do echo $i ;done
##2、序列数据(seq 开始 步长 最后) ---步长默认1
for i in $(seq 1 3 100); do echo $i ;done
##3、命令结果(默认空格为分隔符)
for i in `cat 01.txt`;do echo $i ;done
for i in `ls | grep "heh"` ;do echo $i ;done
##4、语法循环(类似C,注意为双括号,分号隔开)
for ((i=1;i<3;i+=2));do echo i ;done
for ((;;);do echo"无限循环";done
##5、其他情况
具体情况,具体分析
>算术运算
shell中涉及的算术计算与其他语言一样(或其他语言与shell一样,顺序请强迫症患者忽略),有加(+)、减(-)、乘(*)、除(/)、取模(\)、取余(%)、求幂(**)。
shell中有好几种方法实现运算。
方法一,中括号:[...] ##中括号完成算术执行,需通过"$"引用打印出来
echo $[2+3]
方法二,双小括号:((...)) ##等同于let
echo $((3+2)) ##echo $"let 3+2"
方法三,let、expr表达式
let i= 3+2;echo $i;
echo $(expr $i * 3);(运算符之间要有空格,否则全部不执行运算全部输出)(expr还有其他高级应用,暂且不说)
注意:bash不支持浮点类型计算,以上都只能实现整数运算。浮点的运算需要使用bc/awk
echo 0.5*4-0.2|bc;
echo $(awk 'BEGIN{print 0.5*4-0.2}');
案例二
循环打印日期(可指定起始日期或默认日期),并返回天数
> 循环
>if判断
>date日期
#!/bin/bash ##判断变量,是否为空(如果没有或只有一个,进行默认赋值)
if [ "$1" == "" ]
then
start_date=`date -d "today last month" "+%Y%m01"`
end_date=`date -d "today" "+%Y%m%d"`
else
if [ "$2" == "" ]
then
start_date=`date -d "$1" "+%Y%m%d"`
end_date=`date -d "today" "+%Y%m%d"`
fi
fi ##判断两个变量是否有问题(可扩展,进行可用性识别)
if [ "$start_date" -gt "$end_date" ]
then
echo "ERROR! \nplease input a right date"
exit
fi ##通过循环,返回日期值(包含开始和结束日期,闭区间)
for i in `seq `
do
t_date=`date -d "${start_date} +$(($i+1)) day" "+%Y%m%d"`
echo $t_date
cnt_days=$i ##如果循环到当天,就退出
if [ $t_date == $end_date ]
then
break
fi
done echo "The days between two date is "+$cnt_days+" !"
>if判断
格式:if 条件 ; then cmd ; elif cmd ; else cmd ; fi
条件格式要求:中括号两端有至少一个空格,如 [ **** ] ;判断符中间也需要空格,否则执行虽然不报错但不是我们要的结果!
常用的条件:
数值判断
数字1 -eq 数字2 两数相等为真 (equal)
数字1 -ne 数字2 两数不等为真 (not equal)
数字1 -gt 数字2 数字1大于数字2为真 (great than)
数字1 -ge 数字2 数字1大于等于数字2为真 (great equal)
数字1 -lt 数字2 数字1小于数字2为真 (less than)
数字1 -le 数字2 数字1小于等于数字2为真 (less equal)
文件判断
-e 文件是否存在(目录或普通文件,exists) 【示例:[ -e ./02.txt ] && echo "hehe",这是一种简版的if判断,先执行中括号内部命令,true则执行&&后的命令;】
-f 是否为普通文件 (file)【示例:[ -f ./02.txt ] && echo "heh"】
-d 是否为目录文件(directory)【示例:[ -d ./111 ] && echo "heh"】
-r 文件权限:是否可读(read) 【示例:[ -r ./111 ] && echo "heh"】
-w 文件权限:是否可写(write) 【示例:[ -w ./111 ] && echo "heh"】
-x 文件权限:是否可执行(execute) 【示例:[ -x ./111 ] && echo "heh"】
字符段判断
== 是否相同(测试“=”也可以)【[ "hehe" == "xizao" ] && echo "good"】
!= 是否不等 【[ "hehe" != "xizao" ] && echo "good"】
-z 是否为空(长度是否为0) 【[ -z "" ] && echo "good"】
案例三
对重要的系统数据进行备份,备份周期为一个月(20170901增加)
#!/bin/bash #备份日期
date_log=`date "+%Y%m%d"` #加入备份root中的数据
tar -czvf /home/shj/bak/root_${date_log}_bak.tar.gz /root #删除一个月之前的数据
find /home/shj/bak -name "root_*_bak" -mtime + -exec rm -rf {} \;
通过crontab -e,做成定时任务每日零点零分执行(假如我的文件名为:shj_bak.sh)
#分 时 天 月 周 cmd
* * * sh shj_bak.sh
案例四
今天遇到同事不知道怎么了就把crontab任务删除了,需要进行恢复(20170901)
1、通过cron日志查看有那些任务(如果这些日志在期间内没有执行过,将无法收集)
cat /var/log/cron | grep "shj" | awk -F“(” '{print $3}' | sed 's/(//g' | sort | uniq -c # cat查询数据后以管道符传给grep,匹配shj用户,结果给到awk,“(”作为分隔符,打印第三列,并用sed将“)”替换掉,排序后取出唯一值,并显示执行了多少次。
2、知道了命令和执行次数,就需要考虑执行频率了。找到日志开始时间和结束时间
cat /var/log/cron | grep "shj" | awk '{print $1 " " $2}' | sort | uniq >mytmp
echo "日志开始时间为:`head -1 mytmp`,,结束时间为:`tail -1 mytmp`"
3、重写crontab
案例五
通过shell做hive、MySQL的定时任务。(当前工作不少都是这个)(20170906)
shell写hive的定时任务(路径默认为当前家目录)
1、创建你需要的脚本,例:vim hive_perday.sh
2、编写shell脚本
#!/bin/bash if [ "$1"=="" ] #$1如果不加"",当$1为空会报错。假如这个有个日期参数。
then
para1=`date "+%Y&m%d"`
else
para1=$
fi #写你的hive语句(假如需要参数)
hive_sql="select * from mytable where col>'para1'"
#执行你的hive,并将结果输出到指定位置(含错误),将&1替换为/dev/null则不输出错误
hive -e "{$hive_sql}" >~/file >&
#执行hive文件
hive -f hive_file #写入你的MySQL语句
mysql_sql="select * from table where *****"
mysql -host10.10.10. -utest -p**** -P3306 -e "{$mysql_sql}"
3、将你的脚本部署到定时任务中,如果是长期执行则用crontab,如果只执行一次用at。
案例六
Linux文本处理(今天将csv导入MySQL时,发现多了一列以及表头)。于是,我们用awk、sed处理一下吧。(20171011补充)
]$ awk -F, '{print $1","$3","$4","$5}' filename >new_file.csv 处理掉多余的列
]$ sed -n '2,$p' new_file.csv > final.csv
]$ mysql -h10.**** -u*** -p****
mysql > load data local infile 'final.csv' insert into table(a,b,c,d);
原创博客,转载请注明出处!欢迎邮件沟通:shj8319@sina.com
shell实例练习+详解的更多相关文章
- [Spark内核] 第36课:TaskScheduler内幕天机解密:Spark shell案例运行日志详解、TaskScheduler和SchedulerBackend、FIFO与FAIR、Task运行时本地性算法详解等
本課主題 通过 Spark-shell 窥探程序运行时的状况 TaskScheduler 与 SchedulerBackend 之间的关系 FIFO 与 FAIR 两种调度模式彻底解密 Task 数据 ...
- Linux shell tr 命令详解
该随笔摘自 https://www.jb51.net/article/103892.htm Linux shell tr 命令详解 1. 用途 tr,translate的简写,主要用于压缩重复字符,删 ...
- shell字符串操作详解
shell字符串操作详解的相关资料. 1.shell变量声明的判断 表达式 含义 ${var} 变量var的值, 与$var相同 ${var-DEFAULT} 如果var没有被声明, 那么就以$DE ...
- Android EventBus 3.0 实例使用详解
EventBus的使用和原理在网上有很多的博客了,其中泓洋大哥和启舰写的非常非常棒,我也是跟着他们的博客学会的EventBus,因为是第一次接触并使用EventBus,所以我写的更多是如何使用,源码解 ...
- Java经典设计模式之十一种行为型模式(附实例和详解)
Java经典设计模式共有21中,分为三大类:创建型模式(5种).结构型模式(7种)和行为型模式(11种). 本文主要讲行为型模式,创建型模式和结构型模式可以看博主的另外两篇文章:Java经典设计模式之 ...
- Java经典设计模式之七大结构型模式(附实例和详解)
博主在大三的时候有上过设计模式这一门课,但是当时很多都基本没有听懂,重点是也没有细听,因为觉得没什么卵用,硬是要搞那么复杂干嘛.因此设计模式建议工作半年以上的猿友阅读起来才会理解的比较深刻.当然,你没 ...
- mybatis中的mapper接口文件以及selectByExample类的实例函数详解
记录分为两个部分,第一部分主要关注selectByExample类的实例函数的实现:第二部分讨论Mybatis框架下基本的实例函数. (一)selectByExample类的实例函数的实现 当你启动项 ...
- Java设计模式之七大结构型模式(附实例和详解)
博主在大三的时候有上过设计模式这一门课,但是当时很多都基本没有听懂,重点是也没有细听,因为觉得没什么卵用,硬是要搞那么复杂干嘛.因此设计模式建议工作半年以上的猿友阅读起来才会理解的比较深刻.当然,你没 ...
- Java设计模式之十一种行为型模式(附实例和详解)
Java经典设计模式共有21中,分为三大类:创建型模式(5种).结构型模式(7种)和行为型模式(11种). 本文主要讲行为型模式,创建型模式和结构型模式可以看博主的另外两篇文章:J设计模式之五大创建型 ...
随机推荐
- MySQL ALTER TABLE: ALTER vs CHANGE vs MODIFY COLUMN
ALTER COLUMN 语法: ALTER [COLUMN] col_name {SET DEFAULT literal | DROP DEFAULT} 作用: 设置或删除列的默认值.该操作会直接修 ...
- Mac Sublime text3 如何设置更加漂亮好用?
说明:配置是根据自己的需求搜索了蛮多博客测试总结的. 显示效果 配置信息: command + , [逗号], 右侧配置信息 { "color_scheme": "Pac ...
- MapReduce工作原理流程简介
在MapReduce整个过程可以概括为以下过程: 输入 --> map --> shuffle --> reduce -->输出 输入文件会被切分成多个块,每一块都有一个map ...
- HTTP2的新特性
多路复用 二进制分帧 首部压缩(Header Compression) 服务端推送(Server Push) 请求优先级
- Java框架之Spring MVC(二)
一.Spring MVC 验证 JSR 303 是ajvaEE6 中的一项子规范 ,叫 Bean Validation 用于对javaBean中的字段进行校验. 官方的参考实现是: Hibernate ...
- 微信小程序实现简易留言板
微信小程序现在很火,于是也就玩玩,做了一个简易的留言板,让大家看看,你们会说no picture you say a j8 a,好吧先上图. 样子就是的,功能一目了然,下面我们就贴实现的代码,首先是H ...
- ActiveMQ入门介绍
1.JMS简介 JMS的全称是Java Message Service,即Java消息服务.它主要用于在生产者和消费者之间进行消息传递,生产者负责产生消息,而消费者负责接收消息.把它应用到实际的业务需 ...
- <The Art of Readable Code> 笔记二 (下)
第1章 封装信息到名字 (Packing information into names) 4 附加额外信息 1) encode value type 对于某些变量,附加额外的信息可以让人更好的理 ...
- 转JS--通过按钮直接把input或者textarea里的值复制到粘贴板里
document.activeElement属性为HTML 5中新增的document对象的一个属性,该属性用于返回光标所在元素.当光标未落在页面中任何元素内时,属性值返回body元素. setSel ...
- Effective Java 第三版——19. 如果使用继承则设计,并文档说明,否则不该使用
Tips <Effective Java, Third Edition>一书英文版已经出版,这本书的第二版想必很多人都读过,号称Java四大名著之一,不过第二版2009年出版,到现在已经将 ...