shell编程系列26--大型脚本工具开发实战
shell编程系列26--大型脚本工具开发实战
大型脚本工具开发实战
拆分脚本功能，抽象函数
、function get_all_group 返回进程组列表字符串
、function get_all_process 返回进程名列表字符串"nginx httpd mysql datanode"
、function get_process_info 返回进程详细信息列表字符串，详细信息包括：运行状态、PID、CPU、MEM、启动时间
注：该函数可以接收一个参数，参数为进程名称
、function get_all_process_by_group 返回进程组内的所有进程名称列表字符串
例子：DB组--> "mysql postgresql oracle"
功能函数1代码：
function get_all_group
{
if [ ! -e $HOME_DIR/$CONFIG_FILE ];then
echo "$CONFIG_file is not exists..Please check"
exit
else
G_LIST=$(sed -n '/\[GROUP_LIST]/,/\[.*\]/p' /root/lesson/9.1/process.cfg | egrep -v "(^$|\[.*\])")
echo "$G_LIST"
fi
}
[root@localhost 9.1]# sed -n '/\[GROUP_LIST]/,/\[.*\]/p' process.cfg | grep -v "^$" | grep -v "\[.*\]"
WEB
DB
HADOOP
YARN
[root@localhost 9.1]# sed -n '/\[GROUP_LIST]/,/\[.*\]/p' process.cfg | egrep -v "(^$|\[.*\])"
WEB
DB
HADOOP
YARN
功能函数2代码：
function get_all_process
{
for g in `get_all_group`
do
P_LIST=`sed -n "/\[$g\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])"`
echo $P_LIST
done
}
功能函数3代码：
# ps -aux 第三列是cpu使用率，第四列是内存使用率
[root@localhost ~]# ps -aux | grep httpd
root 0.0 0.2 ? Ss : : /usr/sbin/httpd -DFOREGROUND
apache 0.0 0.1 ? S : : /usr/sbin/httpd -DFOREGROUND
apache 0.0 0.1 ? S : : /usr/sbin/httpd -DFOREGROUND
apache 0.0 0.1 ? S : : /usr/sbin/httpd -DFOREGROUND
apache 0.0 0.1 ? S : : /usr/sbin/httpd -DFOREGROUND
apache 0.0 0.1 ? S : : /usr/sbin/httpd -DFOREGROUND
function get_process_info
# 进程本身的pid
this_pid=$$
function get_process_pid_by_name # 获取进程的pid
{
if [ $# -ne ];then
return
else
#pids=`ps -ef | grep $ | grep -v grep | grep -v $this_pid |grep -v $| awk '{print $2}'`
pids=`ps -ef | grep $ | grep -v grep | grep -v $| awk '{print $2}'`
echo $pids
fi
}
function get_process_info_by_pid # 获取进行信息
{
# awk 中引入一个变量
if [ `ps -ef | awk -v pid=$ '$2==pid{print}' | wc -l` -eq ];then
pro_status="RUNNING"
else
pro_status="STOPED"
fi
pro_cpu=`ps aux | awk -v pid=$ '$2==pid{print $3}'`
pro_mem=`ps aux | awk -v pid=$ '$2==pid{print $4}'`
pro_start_time=`ps -p $ -o lstart | grep -v STARTED`
}
功能函数4代码实现：
function is_group_in_config
{
# 如果遍历不存在就返回1
for gn in `get_all_group`;do
if [ "$gn" == "$1" ];then
return
fi
done
return
}
function get_all_process_by_group
{
is_group_in_config
if [ $? -eq ];then
p_list=`sed -n "/\[$1\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|^#|\[.*\])"`
echo $p_list
else
echo "GroupName $1 is not in process.cfg"
fi
}
程序主流程设计：
./app_status.sh执行有三种情况：
、无参数 列出配置文件中所有进程的运行信息
、-g GroupName 列出GroupName组内的所有进程
、process_name1 列出指定进程的运行信息
function get_all_group
说明：该函数无需输入任何参数：返回配置文件 process.cfg中所有的组信息，例如web,db等
function get_all_process
说明：该函数无需输入任何参数：返回配置文件 process.cfg中所有的进程信息
function get_process_pid_by_name
说明：该函数接收一个参数，参数为进程名称：返回值是一个PID的列表，可能有一个PID，也可能有多个
function get_process_info_by_pid
说明：该函数接收一个参数，参数为进程PID；返回值是一个进程运行信息的列表，列表包含运行状态：CPU占用率、内存占用率、进程运行时间
function is_group_in_config
说明 :该函数接收一个参数，参数为组的名称；返回值是0或1,0代表该组在配置文件中，1代表该组不在配置文件中
function get_all_process_by_group
说明：该函数接收一个参数，参数为组名称：返回值是对应组内的所有进程名称列表
function get_group_by_process_name
说明：该函数接收一个参数，参数是一个进程名称：返回值是一个组名
function format_print
说明：该函数接收两个参数，第一个参数为process_name，第二个参数为组名称
返回值，是针对每一个进程PID的运行信息
function is_process_in_config
说明：该函数接收一个参数，参数为进程名称；返回值是0或1，0代表该进程在配置文件中，1代表进程不在配置文件中
配置文件：
[root@localhost 9.1]# cat /root/lesson/9.1/process.cfg
[GROUP_LIST]
WEB
DB
HADOOP
YARN
[WEB]
nginx
httpd
[DB]
mysql
postgresql
oracle
[HADOOP]
datanode
namenode
journalnode
[YARN]
resourcemanager
nodemanager
# 程序脚本
[root@localhost 9.1]# cat /data/shell/app_status.sh
#!/bin/bash
#
# Func: Get Process Status In process.cfg
# Define Variables
HOME_DIR="/root/lesson/9.1"
CONFIG_FILE="process.cfg"
# 进程本身的pid
this_pid=$$
# 获取所有的组
function get_all_group
{
G_LIST=$(sed -n '/\[GROUP_LIST]/,/\[.*\]/p' $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])")
echo $G_LIST
}
#for g in `get_all_group`;do
# echo $g
#done
# 获取所有进程
function get_all_process
{
for g in `get_all_group`
do
P_LIST=`sed -n "/\[$g\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])"`
echo $P_LIST
done
}
# 通过pid获取进程名称
function get_process_pid_by_name
{
if [ $# -ne ];then
return
else
#pids=`ps -ef | grep $ | grep -v grep | grep -v $this_pid |grep -v $| awk '{print $2}'`
pids=`ps -ef | grep $ | grep -v grep | grep -v $| awk '{print $2}'`
echo $pids
fi
}
# 通过pid 获取进程信息
function get_process_info_by_pid
{
# awk 中引入一个变量
if [ `ps -ef | awk -v pid=$ '$2==pid{print}' | wc -l` -eq ];then
pro_status="RUNNING"
else
pro_status="STOPED"
fi
pro_cpu=`ps aux | awk -v pid=$ '$2==pid{print $3}'`
pro_mem=`ps aux | awk -v pid=$ '$2==pid{print $4}'`
pro_start_time=`ps -p $ -o lstart | grep -v STARTED`
#echo "pro_status=$pro_status"
#echo "pro_cpu=$pro_cpu"
#echo "pro_mem=$pro_mem"
#echo "pro_start_time=$pro_start_time"
}
# 判断输入的组是否在配置文件中
function is_group_in_config
{
# 如果遍历不存在就返回1
for gn in `get_all_group`;do
if [ "$gn" == "$1" ];then
return
fi
done
echo "Group $1 is not in process.cfg"
return
}
# 判断进程是否在配置中
function is_process_in_config
{
for pn in `get_all_process`;do
if [ $pn == $ ];then
return
fi
done
echo "Process $1 is not in process.cfg"
return
}
# 通过组名获取组下所有的进程
function get_all_process_by_group
{
# 判断输入的组名是否在group中
is_group_in_config $
if [ $? -eq ];then
p_list=`sed -n "/\[$1\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|^#|\[.*\])"`
echo $p_list
else
echo "GroupName $1 is not in process.cfg"
fi
}
# 通过进程名称获取所在的组
function get_group_by_process_name
{
for gn in `get_all_group`;do
for pn in `get_all_process_by_group $gn`;do
#echo "pn=$pn"
if [ $pn == $ ];then
echo "$gn"
fi
done
done
}
#if [ ! -e $HOME_DIR/$CONFIG_FILE ];then
# echo "$CONFIG_FILE is not exists..please check.."
#fi
#is_group_in_config $ && echo "exists" || echo "not exists"
#get_all_process_by_group $
function format_print
{
ps -ef | grep $ | grep -v grep | grep -v $this_pid &> /dev/null
if [ $? -eq ];then
pids=`get_process_pid_by_name $`
#echo "pids=$pids"
for pid in $pids;do
get_process_info_by_pid $pid
awk -v p_name=$ -v g_name=$ -v p_status=$pro_status -v p_pid=$pid -v p_cpu=$pro_cpu -v p_mem=$pro_mem -v p_start_time="$pro_start_time" 'BEGIN{printf "%-20s%-20s%-20s%-20s%-20s%-20s%-20s\n",p_name,g_name,p_status,p_pid,p_cpu,p_mem,p_start_time}'
# -v 定义的参数需要用双引号引起来""，否则会报错 awk: fatal: cannot open file `' for reading (No such file or directory),主要是因为 p_start_time 中间有空格，需要""双引号引起来
#awk -v p_name="$1" -v g_name="$2" -v p_status="$pro_status" -v p_pid="$pid" -v p_cpu="$pro_cpu" -v p_mem="$pro_mem" -v p_start_time="$pro_start_time" 'BEGIN{printf "%-20s%-20s%-20s%-20s%-20s%-20s%-20s\n",p_name,g_name,p_pid,p_status,p_cpu,p_mem,p_start_time}'
done
else
awk -v p_name=$ -v g_name=$ 'BEGIN{printf "%-20s%-20s%-20s%-20s%-20s%-20s%-20s\n",p_name,g_name,"NULL","Stopped","NULL","NULL","NULL"}'
fi
}
# 打印头信息
awk 'BEGIN{printf "%-20s%-20s%-20s%-20s%-20s%-20s%-20s\n","ProcessName---","GroupName---","Status---","Pid---","CPU---","MEMORY---","StartTime---"}'
if [ $# -gt ];then
# 传递的是组
if [ "$1" == "-g" ];then
shift
# 遍历传递参数的组
for gn in $@;do
# 组名是否在配置文件中， 执行不成功才会 continue 跳过
is_group_in_config $gn || continue
for pn in `get_all_process_by_group $gn`;do
is_process_in_config $pn && format_print $pn $gn
done
done
# 传递的是进程名
else
for pn in $@;do
gn=`get_group_by_process_name $pn`
is_process_in_config $pn && format_print $pn $gn
done
fi
else
# 不添加参数，打印所有进程
for pn in `get_all_process`;do
gn=`get_group_by_process_name $pn`
#echo "gn=$gn, pn=$pn"
is_process_in_config $pn
if [ $? -eq ];then
#echo "format print"
format_print $pn $gn
fi
done
fi
#format_print nginx WEB
#group_name=`get_group_by_process_name $`
#echo $group_name
[root@localhost 9.1]#
# 常用使用方法
[root@localhost shell]# ./app_status.sh
ProcessName--- GroupName--- Status--- Pid--- CPU--- MEMORY--- StartTime---
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
httpd WEB RUNNING 0.0 0.2 Sat Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
mysql DB RUNNING 0.0 0.0 Sat Jun ::
mysql DB RUNNING 0.0 4.8 Sat Jun ::
postgresql DB NULL Stopped NULL NULL NULL
oracle DB NULL Stopped NULL NULL NULL
datanode HADOOP NULL Stopped NULL NULL NULL
namenode HADOOP NULL Stopped NULL NULL NULL
journalnode HADOOP NULL Stopped NULL NULL NULL
resourcemanager YARN NULL Stopped NULL NULL NULL
nodemanager YARN NULL Stopped NULL NULL NULL
[root@localhost shell]# ./app_status.sh -g WEB
ProcessName--- GroupName--- Status--- Pid--- CPU--- MEMORY--- StartTime---
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
httpd WEB RUNNING 0.0 0.2 Sat Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
[root@localhost shell]# ./app_status.sh -g WEB DB
ProcessName--- GroupName--- Status--- Pid--- CPU--- MEMORY--- StartTime---
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
httpd WEB RUNNING 0.0 0.2 Sat Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
mysql DB RUNNING 0.0 0.0 Sat Jun ::
mysql DB RUNNING 0.0 4.8 Sat Jun ::
postgresql DB NULL Stopped NULL NULL NULL
oracle DB NULL Stopped NULL NULL NULL
[root@localhost shell]# ./app_status.sh nginx httpd
ProcessName--- GroupName--- Status--- Pid--- CPU--- MEMORY--- StartTime---
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
nginx WEB RUNNING 0.0 0.1 Sat Jun ::
httpd WEB RUNNING 0.0 0.2 Sat Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
httpd WEB RUNNING 0.0 0.1 Sun Jun ::
[root@localhost shell]#
shell编程系列26--大型脚本工具开发实战的更多相关文章
- shell 大型脚本工具开发实战
拆分脚本功能,抽象函数 1.function get_all_group 返回进程组列表字符串 2.function get_all_process 返回进程名列表字符串"nginx htt ...
- shell编程系列24--shell操作数据库实战之利用shell脚本将文本数据导入到mysql中
shell编程系列24--shell操作数据库实战之利用shell脚本将文本数据导入到mysql中 利用shell脚本将文本数据导入到mysql中 需求1:处理文本中的数据,将文本中的数据插入到mys ...
- shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查)
shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查) Shell脚本与MySQL数据库交互(增删改查) # 环境准备:安装mariadb 数据库 [ro ...
- shell编程系列7--shell中常用的工具find、locate、which、whereis
shell编程系列7--shell中常用的工具find.locate.which.whereis .文件查找之find命令 语法格式:find [路径] [选项] [操作] 选项 -name 根据文件 ...
- shell编程系列1--shell脚本中的变量替换
shell编程系列1--shell脚本中的变量替换 变量替换总结: .${变量#匹配规则} # 从头开始匹配,最短删除 .${变量##匹配规则} # 从头开始匹配,最长删除(贪婪模式) .${变量%匹 ...
- shell编程系列6--shell中的函数
shell编程系列6--shell中的函数 .函数介绍 linux shell中的函数和大多数编程语言中的函数一样 将相似的任务或者代码封装到函数中,供其他地方调用 语法格式 第一种格式 name() ...
- shell编程系列25--shell操作数据库实战之备份MySQL数据，并通过FTP将其传输到远端主机
shell编程系列25--shell操作数据库实战之备份MySQL数据,并通过FTP将其传输到远端主机 备份mysql中的库或者表 mysqldump 常用参数详解: -u 用户名 -p 密码 -h ...
- shell编程系列23--shell操作数据库实战之mysql命令参数详解
shell编程系列23--shell操作数据库实战之mysql命令参数详解 mysql命令参数详解 -u 用户名 -p 用户密码 -h 服务器ip地址 -D 连接的数据库 -N 不输出列信息 -B 使 ...
- shell编程系列21--文本处理三剑客之awk中数组的用法及模拟生产环境数据统计
shell编程系列21--文本处理三剑客之awk中数组的用法及模拟生产环境数据统计 shell中的数组的用法: shell数组中的下标是从0开始的 array=("Allen" & ...
随机推荐
- LeetCode - 92、反转链表 II
反转从位置 m 到 n 的链表.请使用一趟扫描完成反转. 说明: 1 ≤ m ≤ n ≤ 链表长度. 示例: 输入: 1->2->3->4->5->NULL, m ...
- Mybatis控制台打印SQL语句的两种方式
问题描述在使用mybatis进行开发的时候,由于可以动态拼接sql,这样大大方便了我们.但是也有一定的问题,当我们动态sql拼接的块很多的时候,我们要想从*mapper.xml中直接找出完整的sql就 ...
- 三.protobuf3标量值类型
Protobuf3 标量值类型 标量消息字段可以具有以下类型之一——该表显示了.proto文件中指定的类型,以及自动生成的类中的相应类型: .proto类型 说明 C++ 类型 Java 类型 Pyt ...
- 复杂Java对象所占内存的大小
我们在Java单个对象内存布局中讲解了单个简单的Java对象所占内存的大小的计算.那么这篇文章主要是讲解复杂Java对象所占内存大小的计算,我们把继承.复合的对象称为复杂对象 继承对象 class P ...
- 01-学习vue前的准备工作(let和const)
es6语法:let和const es6新增了let命令,用来声明变量.它的用法类似于var,但是所声明的变量,只在let命令所在的代码块内有效 <!DOCYTPE html> <ht ...
- Longest Repeating Subsequence
Description Given a string, find length of the longest repeating subsequence such that the two subse ...
- 学习Spring-Data-Jpa(四)---Naming命名策略，源码跟踪
1.首先在Entity实体中,命名方式有两种: 一种是显示命名,即通过@Table的name属性指定对应的数据库表名称,@Column的name属性指定实体字段对应数据库字段的名称. 另一种是隐式命名 ...
- IDEA的安装和使用
IDEA的特色功能 IDEA所提倡的是智能编码,是减少程序员的工作,IDEA的特色功能有以下22点 [1] : ● 智能的选取 在很多时候我们要选取某个方法,或某个循环或想一步一步从一个变量到整个类 ...
- centOS下实践查询版本/CPU/内存/硬盘容量等硬件信息
更详细参考: https://blog.csdn.net/dream_broken/article/details/52883883 1.查看内存 DirectMap2M: 33544192 kB [ ...
- Oracle trunc() 日期、数字截取函数
--Oracle trunc()函数的用法/**************日期********************/1.select trunc(sysdate) from dual --2013- ...