iamlaosong文
壓縮包由工作人員不定時FTP到指定的目錄,所以我需要一個腳本,每天定時(用crontab)檢測是否有上傳的壓縮包,如果有,則解壓、截短文件名,導入數據庫,下面是腳本并解釋幾個關鍵點:
#timing job:unzip & import costs datafile by iamlaosong 20170215 #!/bin/shBAKDIR=/home/Oracle/ems_suanBINDIR=/home/oracle/bin/sdpt_js#OPDATE=`date -d '-1 day' +%Y%m%d`cd ${BAKDIR}# OPDATE=today - seqfor i in $(seq 45 -1 7)do OPDATE=`date -d "-$i day" +%Y%m%d` echo ${OPDATE} # PRocess SYF zipfile zipfile=${OPDATE}*SYF*.zip if [ -f ${zipfile} ]; then unzip ${zipfile} for tfile in ${OPDATE}*SYF*.txt do tshort=${tfile%SYF*.txt}SYF.txt if [ ${tfile} != ${tshort} ]; then mv ${tfile} ${tshort} fi done [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE} rename _NBCL _ ${OPDATE}*SYF.txt mv ${OPDATE}*SYF.txt ${OPDATE} mv ${zipfile} all_zip cd ${BINDIR} ./jsimp.sh ${OPDATE} SYF >/dev/null cd ${BAKDIR} fi # process BCF zipfile zipfile=${OPDATE}*BCF*.zip if [ -f ${zipfile} ]; then unzip ${zipfile} for tfile in ${OPDATE}*BCF*.txt do tshort=${tfile%BCF*.txt}BCF.txt if [ ${tfile} != ${tshort} ]; then mv ${tfile} ${tshort} fi done [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE} rename _NBCL _ ${OPDATE}*BCF.txt mv ${OPDATE}*BCF.txt ${OPDATE} mv ${zipfile} all_zip cd ${BINDIR} ./jsimp.sh ${OPDATE} BCF >/dev/null cd ${BAKDIR} fidone1、for i in $(seq 45 -1 7)產生一個45到7的序列,用于產生距當天多少天的日期,以便檢測那個日期的壓縮包是否存在。
2、tshort=${tfile%SYF*.txt}SYF.txt
產生一個短文件名,將多余的不確定部分截掉,詳細見linux中如何批量截短文件名3、rename _NBCL _ ${OPDATE}*SYF.txt
批量修改文件名,將文件名中的部分字符改成其它字符,見linux下批量修改文件名,本例是為了去掉一些字符。
4、zipfile=${OPDATE}*SYF*.zip
這個賦值有點意思,如果文件存在,其中的通配符“*”會轉換成相應的字符,如果不存在,則將“*”直接賦給變量。
5、導入程序執行較慢,如果上傳的壓縮包過多,就會發生頭天腳本還沒結束,第二天又會定時啟動一個新的腳本,為避免此事的發生,腳本前面應該加一段檢測代碼,如果有導入進程,則退出處理,代碼如下:
sdpt=$(ps -ef|grep sdpt_js)sdpt=${sdpt#*./}if [ ${sdpt:0:7}="sdpt_js" ]; then echo The import program is running. exitfi其中${sdpt#*./}是截取“./”后面的字符串,而${sdpt:0:7}則是取前7個字符,如果是“sdpt_js”就退出處理。
新聞熱點
疑難解答