iamlaosong文
压缩包由工作人员不定时FTP到指定的目录,所以我需要一个脚本,每天定时(用crontab)检测是否有上传的压缩包,如果有,则解压、截短文件名,导入数据库,下面是脚本并解释几个关键点:
#timing job:unzip & import costs datafile by iamlaosong 20170215 #!/bin/shBAKDIR=/home/Oracle/ems_suanBINDIR=/home/oracle/bin/sdpt_js#OPDATE=`date -d '-1 day' +%Y%m%d`cd ${BAKDIR}# OPDATE=today - seqfor i in $(seq 45 -1 7)do OPDATE=`date -d "-$i day" +%Y%m%d` echo ${OPDATE} # PRocess SYF zipfile zipfile=${OPDATE}*SYF*.zip if [ -f ${zipfile} ]; then unzip ${zipfile} for tfile in ${OPDATE}*SYF*.txt do tshort=${tfile%SYF*.txt}SYF.txt if [ ${tfile} != ${tshort} ]; then mv ${tfile} ${tshort} fi done [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE} rename _NBCL _ ${OPDATE}*SYF.txt mv ${OPDATE}*SYF.txt ${OPDATE} mv ${zipfile} all_zip cd ${BINDIR} ./jsimp.sh ${OPDATE} SYF >/dev/null cd ${BAKDIR} fi # process BCF zipfile zipfile=${OPDATE}*BCF*.zip if [ -f ${zipfile} ]; then unzip ${zipfile} for tfile in ${OPDATE}*BCF*.txt do tshort=${tfile%BCF*.txt}BCF.txt if [ ${tfile} != ${tshort} ]; then mv ${tfile} ${tshort} fi done [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE} rename _NBCL _ ${OPDATE}*BCF.txt mv ${OPDATE}*BCF.txt ${OPDATE} mv ${zipfile} all_zip cd ${BINDIR} ./jsimp.sh ${OPDATE} BCF >/dev/null cd ${BAKDIR} fidone1、for i in $(seq 45 -1 7)产生一个45到7的序列,用于产生距当天多少天的日期,以便检测那个日期的压缩包是否存在。
2、tshort=${tfile%SYF*.txt}SYF.txt
产生一个短文件名,将多余的不确定部分截掉,详细见linux中如何批量截短文件名3、rename _NBCL _ ${OPDATE}*SYF.txt
批量修改文件名,将文件名中的部分字符改成其它字符,见linux下批量修改文件名,本例是为了去掉一些字符。
4、zipfile=${OPDATE}*SYF*.zip
这个赋值有点意思,如果文件存在,其中的通配符“*”会转换成相应的字符,如果不存在,则将“*”直接赋给变量。
5、导入程序执行较慢,如果上传的压缩包过多,就会发生头天脚本还没结束,第二天又会定时启动一个新的脚本,为避免此事的发生,脚本前面应该加一段检测代码,如果有导入进程,则退出处理,代码如下:
sdpt=$(ps -ef|grep sdpt_js)sdpt=${sdpt#*./}if [ ${sdpt:0:7}="sdpt_js" ]; then echo The import program is running. exitfi其中${sdpt#*./}是截取“./”后面的字符串,而${sdpt:0:7}则是取前7个字符,如果是“sdpt_js”就退出处理。
新闻热点
疑难解答