赞
踩
Hive 中没有定义专门的数据格式,数据格式可以由用户指定,用户定义数据格式需要指定三个属性:列分隔符(通常为空格、”\t”、”\x001″)、行分隔符(”\n”)以及读取文件数据的方法。由于在加载数据的过程中,不需要从用户数据格式到 Hive 定义的数据格式的转换,因此,Hive 在加载的过程中不会对数据本身进行任何修改,而只是将数据内容复制或者移动到相应的 HDFS 目录中。
Hive 的默认列分隔符 org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe,其实就是 ^A 分隔符。等同于 row format delimited fields terminated by ‘\001’
在创建表的时候,可以指定如下:
row format delimited
fields terminated by '\001'
collection items terminated by '\002'
map keys terminated by '\003'
lines terminated by '\n'
stored as textfile;
其中,常用的特殊符号编码如下:
更多大数据学习文章,欢迎关注我的公众号:大数据每日哔哔
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。