• shell脚本中执行mysql sql脚本文件并传递参数


    1 shell 文件内容替换

    sed是一个很好的文件处理工具,本身是一个管道命令,主要是以行为单位进行处理,可以将数据行进行替换、删除、新增、选取等特定工作,下面先了解一下sed的用法。

    调用sed命令有两种形式:

    sed [options] 'command' file(s)
     
    sed [options] -f scriptfile file(s)

    常用选项:

           -n∶使用安静(silent)模式。在一般sed 的用法中,所有来自 STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后,则只有经过sed特殊处理的那一行(或者动作)才会被列出来。
           -e∶直接在指令列模式上进行 sed 的动作编辑;
           -f∶直接将 sed 的动作写在一个档案内, -f filename 则可以执行 filename 内的sed动作;
           -r∶sed 的动作支援的是延伸型正规表示法的语法。(预设是基础正规表示法语法)
           -i∶直接修改读取的档案内容,而不是由萤幕输出。       


    常用命令:

            a∶新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~
            c∶取代, c 的后面可以接字串,这些字串可以取代n1,n2 之间的行!
            d∶删除,因为是删除啊,所以 d后面通常不接任何咚咚;
            i∶插入, i的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);
            p∶列印,亦即将某个选择的资料印出。通常 p 会与参数 sed-n 一起运作~
            s∶取代,可以直接进行取代的工作哩!通常这个 s的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是啦!

    举例:

    #删除第一行
    sed '1d' abc.file  
     
    #删除最后一行
    sed '$d' abc.file
     
    #删除第一行到第二行
    sed '1,2d' abc.file
     
    #删除第二行到最后一行
    sed '2,$d' abc.file
     
    #显示第一行
    sed -n '1p' abc.file
          
    #显示最后一行 
    sed -n '$p' abc.file           
     
    #显示第一行到第二行 
    sed -n '1,2p' abc.file       
     
    #显示第二行到最后一行 
    sed -n '2,$p' abc.file
     
    #查询包括关键字ruby所在所有行 
    sed -n '/ruby/p' abc.file
        
    #查询包括关键字$所在所有行,使用反斜线屏蔽特殊含义 
    sed -n '/$/p' abc.file
    
    #第一行后增加字符串"drink tea"
    sed '1a drink tea' abc.file  && cat abc.file
     
    Hello!
    drink tea
    ruby is me,welcome to my blog.
    end
    
    #第一行到第三行后增加字符串"drink tea"
    sed '1,3a drink tea' abc.file && cat abc.file
    Hello!
    drink tea
    ruby is me,welcome to my blog.
    drink tea
    end
    drink tea
    
    #第一行后增加多行,使用换行符
         
    sed '1a drink tea
    or coffee' abc.file  && cat abc.file
    Hello!
    drink tea
    or coffee
    ruby is me,welcome to my blog.
    end
     
    
    #第一行代替为Hi 
    sed '1c Hi' abc.file                
    Hi
    ruby is me,welcome to my blog.
    end
    
    #第一行到第二行代替为Hi
    sed '1,2c Hi' abc.file
    Hi
    end
     
    #替换一行中的某部分格式:sed 's/要替换的字符串/新的字符串/g'   (要替换的字符串可以用正则表达式)
    #替换ruby为bird
    sed -n '/ruby/p' abc.file | sed 's/ruby/bird/g'
      
    #删除ruby    
    sed -n '/ruby/p' abc.file | sed 's/ruby//g'  
     
    #将当前目录下包含ruby串的文件中,ruby字符串替换为java
    sed -i "s/ruby/java/g" `grep "ruby" -rl ./`
    
    #将某个文件中的jack字符串替换为tom
    sed -i "s/ruby/java/g" abc.file
    
    
    #在文件abc.file中最后一行直接输入"bye"
    sed -i '$a bye' abc.file && cat abc.file
    Hello!
    ruby is me,welcome to my blog.
    end
    bye

    2. shell 执行mysql文件

    2.1 语法

    mysql -h host -P port_number -u username -p password <file_to_execute.sql

    2.2 shell执行sql文件,并传参

    给mysql的.sql的脚本文件传递参数,只能利用本文1部分介绍的sed在调用mysql执行命令前,把sql文件中的变量值替换掉,然后调用mysql命令执行sql脚本文件。

    举例:

    准备mysql数据库

    create database if not exists  test;
    use test;
    drop table if  exists demo_table;
    create table demo_table(a varchar(20),age int);

    insertstmt.sql

    insert into test.demo_table values(@name,@age);
    exit

    该脚本文件往mysql数据库test中的表demo_table中插入一条记录,这条记录的两个值都是变量,需要外面传递进来

    execute.sh

    #!/bin/sh
    NAME="lenmom"
    AGE=1
    
    # set parameters as sql variables && add them to the first line of t.sql
    sed -i "1 i set @name='$NAME';" insertstmt.sql
    sed -i "1 i set @age=$AGE;"   insertstmt.sql
    
    # execute sql script
    mysql -u root < insertstmt.sql
    
    # clear sql script variables
    sed -i "1d" insertstmt.sql
    sed -i "1d" insertstmt.sql

     执行效果:

  • 相关阅读:
    shuffle过程分析
    自定义分组
    自定义排序及Hadoop序列化
    MapReduce常见算法
    Partitioner
    Combiner
    自定义Counter使用
    WordCount_命令行运行时指定参数
    老的API实现WordCount
    Hadoop自定义类型处理手机上网日志
  • 原文地址:https://www.cnblogs.com/lenmom/p/11778290.html
Copyright © 2020-2023  润新知