当前位置:   article > 正文

csv数据导入hive表

csv数据导入hive

前言

介绍将csv数据导入hive表


1、将csv文本文件放置hdfs目录下

在这里插入图片描述

2、登录hive并进入到指定数据库

3、创建表

create external table if not exists fun_user_external (
tid INT,
userid STRING,
pwd STRING,
create_time BIGINT,
email STRING
…
) ROW FORMAT DELIMITED FIELDS TERMINATED BY '' STORED AS TEXTFILE 建表语句中主要的是最后一部分:ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘’ STORED AS TEXTFILE
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8

4、执行导入语句

load data inpath ‘/tmp/fun_user.txt’ into table fun_user_external;
load data local inpath ‘/tmp/fun_user.txt’ into table fun_user_external;
  • 1
  • 2

上面两条数据导入语句,如果有local这个关键字,则这个路径应该为本地文件系统路径,数据会被拷贝到目标位置;如果省略掉local关键字,那么这个路径应该是分布式文件系统中的路径,这种情况下,数据是从这个路径转移到目标位置的。

5、例子:

create table temp.zqxk_veh_v2(
vehicle_id VARCHAR(100),
brand VARCHAR(100),
model VARCHAR(100),
vehicle_type VARCHAR(100),
cllx VARCHAR(100),
qdxs VARCHAR(100),
approve_ton int
)
ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE;
LOAD DATA inpath '/user/hive/warehouse/temp.db/zqxk_veh/zqxk.csv' into table temp.zqxk_veh_v2;
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11

二、使用hue将csv数据导入hive表

使用hue将csv数据导入hive表


总结

如果此篇文章有帮助到您, 希望打大佬们能关注点赞收藏评论支持一波,非常感谢大家!
如果有不对的地方请指正!!!

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/634049
推荐阅读
相关标签
  

闽ICP备14008679号