OGG运维优化脚本(二)-信息修改类--批量加表
admin
2023-05-24 18:22:36
0

现在开始介绍脚本,所有的脚本必须在prm配置文件添加注释后才能成功使用

详细请参考 脚本部署准备 

实际的运维过程中,我们的OGG程序都统一部署在$home/ggserver路径下,


批量加表

文件名: insert.sh

脚本所在路径:$HOME/ggscript/gginsert

功能:为满足应用时常提出的大批量增加同步表需求

用于批量加表,包括重复配置表过滤功能以及附加日志自动增加功能

该脚本通过edit脚本选择调用

该脚本目前只能对EXTRACT发送进程生效

日志路径: $HOME/gglog/gginsert


#!/bin/bash
backuptime=`date +%Y%m%d-%H%M`
datenow=`date +%Y%m%d%H`
 cd $HOME/ggscript/gginsert

echo $backuptime
echo "This script will search for the table that has been added and insert new table( by RenYi)"
echo $backuptime > ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'



ls -lrt $HOME/ggserver/dirprm/e*.prm $HOME/ggserver/dirprm/p*.prm
$val
#输入需操作的进程对应文件名(prm结尾)
read -p "Please enter the prm file name:"  val
echo "--------insert file name------" >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
echo $val >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'

#输入需要批量增加表对应的区域
cat $HOME/ggserver/dirprm/$val|grep Begin
read -p "Please enter the Area name:" area
echo "--------insert area------" >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
echo $area >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'


#在vi界面内粘贴需要增加的表名(无TABLE前缀,无分号结尾,请勿插入空格)
echo "Please Enter the table you want to add(Please enter any key)-Do not include spaces!"
read -n 1
vi AddTemp

echo "-----insert table------"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
cat  AddTemp >>  ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'

#echo $val
#echo "awk '/--$area-Begin/,/--$area-End/{if(i>1)print x;x=$1;i++}' $HOME/ggserver/dirprm/$val"
#重复表比对过滤
cat $HOME/ggserver/dirprm/$val|awk '/--'$area'-Begin/,/--'$area'-End/{if(i>1)print x;x=$0;i++}' > temp
awk -F '--'  '($1) { print $1}' temp > temp2
rm -rf temp
sed  -e '/^$/d'  temp2 > temp3
rm -rf temp2
awk -F ',' '{print $1}' temp3 >temp4
rm -rf temp3
awk -F ';' '{print $1}' temp4 >temp5
rm -rf temp4
echo "Confirm the tables that have increased"
cat temp5|awk  -F 'TABLE '  '{print $2}' > AddedTemp
rm -rf temp5
sed '/^$/d' AddedTemp > AddedTemp2
sed '/^$/d' AddTemp > AddTemp2


cat AddTemp2 |sort -n > AddTable
cat AddedTemp2 |sort -n > AddedTable
rm -f AddTemp



comm -12  AddTable AddedTable > Duplicate
num=`sed -n '$=' Duplicate`
echo "Check out the already added table in file "Duplicate",there were  '$num'  tables has being added"
echo "---------The already added table---------"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
cat Duplicate >>  ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'


comm -23  AddTable AddedTable > NeedToAdd
num=`sed -n '$=' NeedToAdd`
echo "Check out the Not yet add table in file "NeedToAdd",,there are  '$num'  tables not add"
echo "---------The not yet added table---------"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
cat NeedToAdd >>  ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'


#rm -rf AddedTable
#rm -rf AddTable

#表插入操作
echo "Do you want to insert the table into '$val'?"
read -p "Please enter y or n:"  con
if [ "$con" == "y" ]
                then
                        echo "backup the '$val' to the '$HOME/ggserver/dirprm/bak/$val.$backuptime.bak'"
                        echo "backup the '$val' to the '$HOME/ggserver/dirprm/bak/$val.$backuptime.bak'"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
                        cp $HOME/ggserver/dirprm/$val $HOME/ggserver/dirprm/bak/$val.$backuptime.bak
                        echo "backup complete"
                        echo "backup complete" >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'

                        echo "modifying table "
                        sed 's/^/TABLE /' NeedToAdd > table1
                        sed 's/$/;/' table1 > table2
        num=`sed -n '$=' table2`
                        rm -f table1
                        read -p "Please enter your name:" name
                        echo "-----The Operator is '$name'--------" >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
                        echo "inserting '$num' tables into '$val' "
                        echo "inserting '$num' tables into '$val' " >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
                        sed  '1 i\
--'$datenow'-'$name'-add
                        ' table2 > table3
rm -f table2
                        mv table3 table2
                echo "inserting table"
                        sed  '/'$area'-Insert/r table2
                        ' $HOME/ggserver/dirprm/$val > $HOME/ggserver/dirprm/tem3
                rm -f $HOME/ggserver/dirprm/$val
                mv $HOME/ggserver/dirprm/tem3 $HOME/ggserver/dirprm/$val


                echo "insert complete"
                echo "---------insert complete"--------- >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
                else
                        echo "process complete"
                        echo "process complete"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
fi

#附加日志增加操作
echo "Do you want to addtrandata?"
read -p "Please enter y or n:"  conb
if [ "$conb" == "y" ]
                then
                sed 's/^/add trandata /' NeedToAdd > addtrandata
                NUX=`sed -n '$=' addtrandata`
#               echo $NUX
                        i=1
#echo $i
                cd $HOME/ggserver
                        echo dblogin `more $HOME/ggserver/dirprm/$val|grep USERID` > dirdat/addtrandata
#echo $login
                        while [ "$i" -le "$NUX" ]
                                do 
                                sed -n "${i}p"  $HOME/ggscript/gginsert/addtrandata >> dirdat/addtrandata
                                i=`expr $i + 1`
                        done
                        echo   OBEY dirdat/addtrandata |./ggsci
                else
                echo "process complete"
                echo "process complete"  >> ''$HOME'/ggscript/gginsert/log/InsertLog-'$backuptime'.log'
                exit 2
fi




相关内容

热门资讯

美财长:本来还想写“和伊朗最高... 美国财政部长贝森特说,美国总统特朗普政府将“不惜一切代价”支持日本稳定汇市。他还幽默地回应了媒体拍到...
对伊战争消耗过大,美弹药库存告... 美伊战争已经持续近半年,战争大量消耗美军的关键弹药储备,西媒爆料称,美国弹药库存告急。美国总统特朗普...
华为E-band微波产品斩获2... 【CNMO科技消息】 近日,华为E-band微波产品RTN 3800凭借其卓越的设计理念和技术创新,...
原创 美... 当国际空间站走到退役那一天,能不能控制它撞向中国空间站?一些美国网络社区出现这种设想,乍看像在讨论航...
华灿光电:Micro LED通... 证券之星消息,华灿光电(300323)08月04日在投资者关系平台上答复投资者关心的问题。 投资者:...
济宁的破与立:产业蝶变万亿可期... 刚刚过去的7月,济宁有两件事将机器人产业推向了新的高度。一是7月9日,珞石机器人在港交所上市,这是山...
机器人企业TOP50发布,背后... 视频制作:实习生 余天雯 8月3日,DBC德本咨询联合CIW、eNet发布《2026中国科技机器人企...
戈碧迦获得发明专利授权:“一种... 证券之星消息,根据天眼查APP数据显示戈碧迦(920438)新获得一项发明专利授权,专利名为“一种尖...
微信:即日起不再支持 8月3日,微信公众平台运营中心发布关于规范互联网渠道售卡类服务内容的公告。 微信公众平台一直致力于为...
杂活全丢给AI做,TRAE W... 一夜之间,字节、阿里、腾讯国产 AI「御三家」不约而同加码 AI 办公(Work Agent)。AI...