hive的常用函数工作总结

1、concat_ws

它是一个特殊形式的 CONCAT()

concat_ws(分隔符,参数1,参数2.。。。。。。) as 字段

2、split

返回值为一个数组

a.基本用法：

例1：split('a,b,c,d',',')

得到的结果：["a","b","c","d"]

b.截取字符串中的某个值：

当然，我们也可以指定取结果数组中的某一项

例2：split('a,b,c,d',',')[0]

得到的结果：a

c.特殊字符的处理：

特殊分割符号

regex 为字符串匹配的参数，所以遇到特殊字符的时候需要做特殊的处理

例3:  "." 点

split('192.168.0.1','.')

得到的结果：[]

正确的写法：split('192.168.0.1','\.')

得到的结果：["192","168","0","1"]

需要注意的是：

当然当split包含在 "" 之中时 需要加4个

如 hive -e "....  split('192.168.0.1','\\.') ... "  不然得到的值是null

同样的 | 等特殊符号也需要做类似 处理。

指定多个分隔符时，多个分隔符使用 | 连接

测试：

drop table test;
create table if not exists test(
name string,
age string,
sex string
)row format delimited fields terminated by ','
lines terminated by '
'
stored as textfile;
load data local inpath '/usr/test.txt' overwrite into table test;

栗子：想通过分割得到name中的li和i，指定;和-两个分隔符；注意分割之后得到的是一个数组array，下标从0开始

select split(a.name,'-|;')[0],split(a.name,'-|;')[2] from test a ;