用Shell脚本生成XML文件实例详解

作者：怎么找个名字这么费劲 | 来源：互联网 | 2017-05-14 02:24

今天把这段时间学习完shell后完成工作上的一个小案件整理了一下，分享给大家！说来也巧了，作为一个刚刚毕业半年的菜鸟，进入公司后，听公司的大牛推荐学习linux–”...

今天把这段时间学习完shell后完成工作上的一个小案件整理了一下，分享给大家！

说来也巧了，作为一个刚刚毕业半年的菜鸟，进入公司后，听公司的大牛推荐学习linux–”鸟哥的私房菜“，基本上是从去年8月份开始到了今年的1月份，基本上是把基础篇看完了，开始了解shell脚本的相关知识。刚好公司有了一个shell脚本的案件给我了，时间上也没有多紧。然后就一边学习一边开始做，虽然中途客户反映先前的业务逻辑有问题耽搁了两周，但总算是到最后完成了，自己学习的东西能用到很开心，今天闲了，把代码整理了一下，分享给大家

具体是这样：

要求是写一个shell脚本，安装要求查询数据，将符合条件的数据按照客户给定的xml样式进行组装，然后加入到crontab中，定时执行通过scp或者ftp放到客户服务器上。

具体实现步骤：

一、编写生成xml文档的代码

#! /bin/bash
# filename: create_xml.sh
# create_wangxb_20150123
#
# 从外部传入的第一个参数作为xml的文件名
outfile=$1
# xml中的缩进位
tabs=0

# ++++++++++++++++++++++++++++
# 组装一个节点，输出到文件
# 说一说传参数时的这几个区别：假如有下面这个脚本执行的命令
# /path/to/scriptname  opt1  opt2  opt3  opt4 
# $0: 的值是默认是脚本的名字，从$1-$4 开始就是参数的值
# $# ：代表后接的参数『个数』
# $@ ：代表『 "$1" "$2" "$3" "$4" 』之意，每个变量是独立的(用双引号括起来)； 
# $* ：代表『 "$1c$2c$3c$4" 』，其中 c 为分隔字节，默认为空白键， 所以本例中代表『 "$1 $2 $3 $4" 』之意。
# 在shell中我们可以也可以使用${}包含变量名，来调用变量
# ++++++++++++++++++++++++++++
put(){
    echo &＃39;<&＃39;${*}&＃39;>&＃39; >> $outfile
}

# 这里也是输出一个xml的节点，只是比上面的节点有更多的设置
# ${@:2} 的意思：它的值就是由第二个参数开始到最后一个参数，为什么要这样？有时可能你的第二个参数中有空格，shell接受参数是以空格计算的
put_tag() {
    echo &＃39;<&＃39;$1&＃39;>&＃39;${@:2}&＃39;&＃39; >> $outfile
}
# 同样是一个输出节点函数，但是添加了CDATA，防止特殊字符造成xml解析失败
put_tag_cdata() {
    echo &＃39;<&＃39;$1&＃39;>&＃39; >> $outfile
}

put_head(){
    put &＃39;?&＃39;${1}&＃39;?&＃39;
}
# 这是一个缩进的算法，自行理解
out_tabs(){
    tmp=0
    tabsstr=""
    while [ $tmp -lt $((tabs)) ]
    do
        tabsstr=${tabsstr}&＃39;\t&＃39;
        tmp=$((tmp+1))
    done
    echo -e -n $tabsstr >> $outfile
}

tag_start(){
    out_tabs
    put $1
    tabs=$((tabs+1))
}

tag() {
    out_tabs
    if [ "$1" == 0 ]
    then
        put_tag $2 $(echo ${@:3})
    elif [ "$1" == 1 ]
    then
        put_tag_cdata $2 $(echo ${@:3})
    fi
}

tag_end(){
    tabs=$((tabs-1))
    out_tabs
    put &＃39;/&＃39;${1}
}

这里有一些基础知识：

关于参数：

假如有下面这个脚本执行的命令
/path/to/scriptname opt1 opt2 opt3 opt4

 $0: 的值是默认是脚本的名字，从$1-$4 开始就是参数的值
 $# ：代表后接的参数『个数』
 $@ ：代表『 "$1" "$2" "$3" "$4" 』之意，每个变量是独立的(用双引号括起来)； 
 $* ：代表『 "$1c$2c$3c$4" 』，其中 c 为分隔字节，默认为空白键， 所以本例中代表『 "$1 $2 $3 $4" 』之意。
 在shell中我们可以也可以使用${}包含变量名，来调用变量

二、从数据库查数据利用上面的函数，制作xml文件

#!/bin/bash
# filename: ts_xml.sh
# create_wangxb_20150126
#

PATH=/u01/app/oracle/product/10.2.0/db_1/bin:/usr/kerberos/bin:/usr/local/bin:/bin:/usr/bin:/opt/dell/srvadmin/bin:/home/p3s_batch/tools:/home/p3s_batch/bin
export PATH
# Database account information file
source ~/.p3src

#++++++++++++++++++++++++++++++++++++++++++++++++++++++++
# set some variable 
# XMLSCRIPT: 脚本的绝对路径
# MATCHING_RESULT_XML: xml_1的文件名 
# XML_FUNC_FILE: 生成xml函数文件路径
# MATCHING_RESULT_QUERY_DATA: sqlplus 查出数据保存的零时文件
# MATCHING_RESULT_QUERY_SQL: sqlplus 查询的sql语句
#++++++++++++++++++++++++++++++++++++++++++++++++++++++++
# 下面是一些基础的设置
export XMLSCRIPT=/usr/p3s/batch/jaaa_match/tmp_xa_wangxb
XML_DIR="$XMLSCRIPT/xmldata"
XML_FUNC_FILE="xml_func.sh"

MATCHING_RESULT_XML="matching_result_"$(date &＃39;+%Y%m%d_%H%M%S&＃39;)".xml"
MATCHING_RESULT_QUERY_DATA="matching_result_query_data.tmp"
MATCHING_RESULT_QUERY_SQL="matching_result_query.sql"

CLIENT_LIST_XML="client_list_"$(date &＃39;+%Y%m%d_%H%M%S&＃39;)".xml"
CLIENT_LIST_QUERY_DATA="client_list_query_data.tmp"
CLIENT_LIST_QUERY_SQL="client_list_query.sql"

# add_wangxb_20150225
if [ ! -d "$XML_DIR" ];
then
    mkdir $XML_DIR
fi

#+++++++++++++++++++++++++++
# modify_wangxb_20150224
# check for temporary file 
#+++++++++++++++++++++++++++
if [ -e "$XML_DIR/$MATCHING_RESULT_XML" ];
then
    rm -f $XML_DIR/$MATCHING_RESULT_XML
fi

if [ -e "$XMLSCRIPT/$MATCHING_RESULT_QUERY_DATA" ];
then
    MATCHING_RESULT_QUERY_DATA="matching_result_query_data_"$(date &＃39;+%Y%m%d%H%M%S&＃39;)".tmp"
fi
#+++++++++++++++++++++++++++++++++++++++++++++++++
# add_wangxb_20150225
# check system time,  choice query time period
# 这是是根据crontab每天执行的时间，取得我们查询数据库时的where条件的时间区间
#+++++++++++++++++++++++++++++++++++++++++++++++++
sys_datetime=$(date &＃39;+%Y%m%d%H&＃39;)
first_chk_datetime="$(date &＃39;+%Y%m%d&＃39;)04"
second_chk_datetime="$(date &＃39;+%Y%m%d&＃39;)12"
third_chk_datetime="$(date &＃39;+%Y%m%d&＃39;)20"
# 由于服务器crontab是上面的时间，但是执行的shell比较多，在调用我这个shell的时候，不一定就是04:30 ，12:30, 20:30所以，这里的根据系统的时间判断时 范围给的比较宽
case $sys_datetime in
    "$first_chk_datetime"|"$(date &＃39;+%Y%m%d&＃39;)05"|"$(date &＃39;+%Y%m%d&＃39;)06"|"$(date &＃39;+%Y%m%d&＃39;)07")
        chk_start=$(date &＃39;+%Y-%m-%d 21:00:00&＃39; -d &＃39;-1 day&＃39;)
        chk_end=$(date &＃39;+%Y-%m-%d 04:29:59&＃39;)
    ;;
    "$second_chk_datetime"|"$(date &＃39;+%Y%m%d&＃39;)13"|"$(date &＃39;+%Y%m%d&＃39;)14"|"$(date &＃39;+%Y%m%d&＃39;)15")
        chk_start=$(date &＃39;+%Y-%m-%d 04:30:00&＃39;)
        chk_end=$(date &＃39;+%Y-%m-%d 12:29:59&＃39;)

    ;;
    "$third_chk_datetime"|"$(date &＃39;+%Y%m%d&＃39;)21"|"$(date &＃39;+%Y%m%d&＃39;)22"|"$(date &＃39;+%Y%m%d&＃39;)23")
        chk_start=$(date &＃39;+%Y-%m-%d 12:30:00&＃39;)
        chk_end=$(date &＃39;+%Y-%m-%d 20:59:59&＃39;)

    ;;
    *)
        chk_start=$(date &＃39;+%Y-%m-%d 00:00:00&＃39;)
        chk_end=$(date &＃39;+%Y-%m-%d 23:59:59&＃39;)

    ;;
esac

# modify_wangxb_20150310
# 下面的是做一个oracle数据库连接的测试，如果连接失败，后续代码不再执行，并且写入错误日志
$ORACLE_HOME/bin/sqlplus -s $ORAUSER_WEB_PASDB < 输出到指定文件
$ORACLE_HOME/bin/sqlplus -s $ORAUSER_WEB_PASDB @$XMLSCRIPT/$MATCHING_RESULT_QUERY_SQL "$chk_start" "$chk_end" > $XMLSCRIPT/$MATCHING_RESULT_QUERY_DATA

# create matching result&＃39;s xml file
# add_wangxb_20150227
# 下面的算法就是将查出的数据进行分析，调用xml函数生成xml文件
source "$XMLSCRIPT/$XML_FUNC_FILE" "$XML_DIR/$MATCHING_RESULT_XML"
put_head &＃39;xml version="1.0" encoding="utf-8"&＃39;
tag_start &＃39;ROOT&＃39;
if [ -s "$XMLSCRIPT/$MATCHING_RESULT_QUERY_DATA" ];
then
    datas=${XMLSCRIPT}/${MATCHING_RESULT_QUERY_DATA}
    #for res in $datas
    while read res;
    do
        stock_id=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $1}&＃39;)
        seirino=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $2}&＃39;)
        match_flg=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $3}&＃39;)
        unmatch_riyuu=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $4}&＃39;)
        up_date_tmp=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $5}&＃39;)
        up_date=$(echo $up_date_tmp | awk &＃39;BEGIN {FS="@"} {print $1 " " $2}&＃39;)
        tag_start &＃39;MATCHING&＃39;
        tag 0 &＃39;STOCKID&＃39; ${stock_id:-""}
        tag 0 &＃39;SEIRINO&＃39; ${seirino:-""}
        tag 0 &＃39;RESULT&＃39; ${match_flg:-""}
        tag 1 &＃39;REASON&＃39; ${unmatch_riyuu:-""}
        tag 0 &＃39;UPDATE_DATE&＃39; ${up_date:-""}
        tag_end &＃39;MATCHING&＃39;
    done <$datas
fi
tag_end &＃39;ROOT&＃39;
rm $XMLSCRIPT/$MATCHING_RESULT_QUERY_DATA

# create client list&＃39;s xml file
# add_wangxb_2015027
# 下面的是再生成一个xml文件，和上面一样
if [ -e "$XML_DIR/$CLIENT_LIST_XML" ];
then
    rm -f $XML_DIR/$CLIENT_LIST_XML
fi

if [ -e "$XMLSCRIPT/$CLIENT_LIST_QUERY_DATA" ];
then
    CLIENT_LIST_QUERY_DATA="client_list_query_data_"$(date &＃39;+%Y%m%d%H%M%S&＃39;)".tmp"
fi

$ORACLE_HOME/bin/sqlplus -s $ORAUSER_MND @$XMLSCRIPT/$CLIENT_LIST_QUERY_SQL > $XMLSCRIPT/$CLIENT_LIST_QUERY_DATA

source "$XMLSCRIPT/$XML_FUNC_FILE" "$XML_DIR/$CLIENT_LIST_XML"
put_head &＃39;xml version="1.0" encoding="utf-8"&＃39;
tag_start &＃39;ROOT&＃39;
if [ -s "$XMLSCRIPT/$CLIENT_LIST_QUERY_DATA" ];
then
    datas=${XMLSCRIPT}/${CLIENT_LIST_QUERY_DATA}
    #for res in $datas
    while read res;
    do
        corporation_id=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $1}&＃39;)
        corporation_name=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $2}&＃39;)
        client_id=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $3}&＃39;)
        client_print_name=$(echo $res | awk &＃39;BEGIN {FS="\\^\\*\\^"} {print $4}&＃39;)
        tag_start &＃39;CLIENT&＃39;
        tag 0 &＃39;CORPORATION_ID&＃39; ${corporation_id:-""}
        tag 1 &＃39;CORPORATION_NAME&＃39; ${corporation_name:-""}
        tag 0 &＃39;CLIENT_ID&＃39; ${client_id:-""}
        tag 1 &＃39;CLIENT_PRINT_NAME&＃39; ${client_print_name:-""}
        tag_end &＃39;CLIENT&＃39;
    done <$datas
fi
tag_end &＃39;ROOT&＃39;
rm $XMLSCRIPT/$CLIENT_LIST_QUERY_DATA

# add_wangxb_20150304
# Convert xml file encoding
# 这是将xml文件进行转码，命令是iconv
if [ -e "$XML_DIR/$MATCHING_RESULT_XML" ];
then
    echo "********** matching_result.xmlファイルコ〖ドを啪垂し、**********"
    iconv -f euc-jp -t utf-8 $XML_DIR/$MATCHING_RESULT_XML  -o $XML_DIR/$MATCHING_RESULT_XML.utf-8
    mv $XML_DIR/$MATCHING_RESULT_XML.utf-8 $XML_DIR/$MATCHING_RESULT_XML
fi
if [ -e "$XML_DIR/$CLIENT_LIST_XML" ];
then
    echo "********** client_list.xmlフィルコ〖ドを啪垂し、**********"
    iconv -f euc-jp -t utf-8 $XML_DIR/$CLIENT_LIST_XML  -o $XML_DIR/$CLIENT_LIST_XML.utf-8
    mv $XML_DIR/$CLIENT_LIST_XML.utf-8 $XML_DIR/$CLIENT_LIST_XML
fi

# add_wangxb_20150304
# Send the xml file to the destination server by ftp
#ftp_host="222.***.***.***"
#USER="***"
#PASS="***"
#ftp -i -n $ftp_host <本来是用scp传送的，但是后面修改了，这里把自己为scp传送找到的一个，不用密码可立即登入的 ssh 用户
下面是执行的两个sql文件
SET PAGESIZE 0
SET FEEDBACK OFF
SET VERIFY OFF
SET ECHO OFF
SET HEADING OFF
SET TIMI OFF
SET LINESIZE 1000
SET WRAP OFF

SELECT s.STOCKID|| &＃39;^*^&＃39; ||a.SERI_NO|| &＃39;^*^&＃39; ||a.MATCH_FLG|| &＃39;^*^&＃39; ||a.UNMATCH_RIYUU|| &＃39;^*^&＃39; ||to_char(a.UP_DATE,[email protected]:MI:SS&＃39;) UP_DATE FROM aaa_stock_db a LEFT JOIN SENDDATAAPPRAISALPROTO s ON a.SERI_NO=s.SEIRINO WHERE a.UP_DATE BETWEEN to_date(&＃39;&1&＃39;,&＃39;yyyy-mm-dd hh24:mi:ss&＃39;) AND to_date(&＃39;&2&＃39;,&＃39;yyyy-mm-dd hh24:mi:ss&＃39;) AND a.DEL_FLG=0 ORDER BY a.UP_DATE DESC;

exit
SET PAGESIZE 0
SET FEEDBACK OFF
SET VERIFY OFF
SET ECHO OFF
SET HEADING OFF
SET TIMI OFF
SET LINESIZE 1000
SET WRAP OFF

SELECT a.CORPORATION_ID|| &＃39;^*^&＃39; ||a.CORPORATION_NAME|| &＃39;^*^&＃39; ||b.CLIENT_ID|| &＃39;^*^&＃39; ||(select CLIENT_PRINT_NAME from CLIENT_MASTER where CLIENT_ID = b.CLIENT_ID) as CLIENT_PRINT_NAME FROM M_CORPORATION_MASTER a LEFT JOIN M_CORPORATION_GROUP b ON (a.CORPORATION_ID = b.CORPORATION_ID) WHERE a.DEL_FLG=0 AND b.DEL_FLG=0;

exit
三、来看看效果
当然中间出现了许多bug，不过慢慢修改吗，兵来将挡，水来土掩，bug来了自己调么
就这样简单的整理一下，可能光这么写不够完整，但是，中间设计的知识也很多，不能展开了说，做个分享，大家有用到的时候也是个思路，具体的某些知识点可以用到了再去找资料了。
以上就是用Shell脚本生成XML文件实例详解的详细内容，更多请关注 第一PHP社区 其它相关文章！

推荐阅读

list
新浪笔试题

1:有如下一段程序：packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]

蜡笔小新 2024-12-27 19:32:17
list
网络链路质量监控：Smokeping部署与配置

本文详细介绍了如何在Linux系统上安装和配置Smokeping，以实现对网络链路质量的实时监控。通过详细的步骤和必要的依赖包安装，确保用户能够顺利完成部署并优化其网络性能监控。 ... [详细]

蜡笔小新 2024-12-27 19:31:05
list
告别传统文件传输，迎接新一代高效工具Croc

在现代网络环境中，两台计算机之间的文件传输需求日益增长。传统的FTP和SSH方式虽然有效，但其配置复杂、步骤繁琐，难以满足快速且安全的传输需求。本文将介绍一种基于Go语言开发的新一代文件传输工具——Croc，它不仅简化了操作流程，还提供了强大的加密和跨平台支持。 ... [详细]

蜡笔小新 2024-12-26 16:16:06
post
MySQL 数据库迁移指南：从本地到远程及磁盘间迁移

本文详细介绍了如何在不同场景下进行 MySQL 数据库的迁移，包括从一个硬盘迁移到另一个硬盘、从一台计算机迁移到另一台计算机，以及解决迁移过程中可能遇到的问题。 ... [详细]

蜡笔小新 2024-12-26 13:21:38
post
优化联通光猫DNS服务器设置

本文详细介绍了如何为联通光猫配置DNS服务器地址，以提高网络解析效率和访问体验。通过智能线路解析功能，域名解析可以根据访问者的IP来源和类型进行差异化处理，从而实现更优的网络性能。 ... [详细]

蜡笔小新 2024-12-28 11:28:18
post
PHP检测AJAX请求的有效方法

本文详细介绍了如何使用PHP检测AJAX请求，通过分析预定义服务器变量来判断请求是否来自XMLHttpRequest。此方法简单实用，适用于各种Web开发场景。 ... [详细]

蜡笔小新 2024-12-27 21:20:10
export
CentOS7源码编译安装MySQL5.6

2019独角兽企业重金招聘Python工程师标准一、先在cmake官网下个最新的cmake源码包cmake官网：https:www.cmake.org如此时最新 ... [详细]

蜡笔小新 2024-12-27 17:49:56
replace
Java面试题解析

本文详细介绍了Java编程语言中的核心概念和常见面试问题，包括集合类、数据结构、线程处理、Java虚拟机（JVM）、HTTP协议以及Git操作等方面的内容。通过深入分析每个主题，帮助读者更好地理解Java的关键特性和最佳实践。 ... [详细]

蜡笔小新 2024-12-27 13:55:14
hash
Linux 网卡绑定的七种工作模式详解

本文深入探讨了Linux系统中网卡绑定（bonding）的七种工作模式。网卡绑定技术通过将多个物理网卡组合成一个逻辑网卡，实现网络冗余、带宽聚合和负载均衡，在生产环境中广泛应用。文章详细介绍了每种模式的特点、适用场景及配置方法。 ... [详细]

蜡笔小新 2024-12-27 10:18:13
utf-8
掌握远程执行Linux脚本和命令的技巧

本文将详细介绍如何利用Python的Paramiko库实现远程执行Linux脚本和命令，帮助读者快速掌握这一实用技能。通过具体的示例和详尽的解释，让初学者也能轻松上手。 ... [详细]

蜡笔小新 2024-12-26 19:47:05
utf-8
解决Hive启动时权限被拒问题

本文详细分析了Hive在启动过程中遇到的权限拒绝错误，并提供了多种解决方案，包括调整文件权限、用户组设置以及环境变量配置等。 ... [详细]

蜡笔小新 2024-12-26 19:14:29
utf-8
使用Vultr云服务器和Namesilo域名搭建个人网站

本文详细介绍了如何通过Vultr云服务器和Namesilo域名搭建一个功能齐全的个人网站，包括购买、配置服务器以及绑定域名的具体步骤。文章还提供了详细的命令行操作指南，帮助读者顺利完成建站过程。 ... [详细]

蜡笔小新 2024-12-26 16:36:34
utf-8
MySQL缓存机制深度解析

本文详细探讨了MySQL的缓存机制，包括主从复制、读写分离以及缓存同步策略等内容。通过理解这些概念和技术，读者可以更好地优化数据库性能。 ... [详细]

蜡笔小新 2024-12-26 15:15:06
list
基于KVM的SRIOV直通配置及性能测试

SRIOV介绍、VF直通配置，以及包转发率性能测试小慢哥的原创文章，欢迎转载目录?1.SRIOV介绍?2.环境说明?3.开启SRIOV?4.生成VF?5.VF ... [详细]

蜡笔小新 2024-12-25 19:26:39
list
Linux系统中设置服务启动优先级的方法

本文详细介绍了Linux系统中init进程的作用及其启动过程，解释了运行级别的概念，并提供了调整服务启动顺序的具体步骤和实例。通过了解这些内容，用户可以更好地管理系统的启动流程和服务配置。 ... [详细]

蜡笔小新 2024-12-25 16:16:05

怎么找个名字这么费劲

这个家伙很懒，什么也没留下！

Tags | 热门标签

RankList | 热门文章