2020-07-04
阅读量:
1109
很多小文件需要导入到一张hive表里面，但是一个个导入非常麻烦?
使用MSCK命令导入输入到hive表
我们有时候会遇到很多小文件需要导入到一张hive表里面，但是一个个导入非常麻烦。
假设创建一个外部表，这个表在hdfs的order文件夹里，但是这个文件夹现在是空的。所以用select * 是没有数据的。
CREATE EXTERNAL TABLE order(
order STRING
, time STRING
)
ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'
LOCATION '/hive/order';
我们通过hdfs dfs -put 方式把数据导入到hdfs的order 文件夹下。
然后在hive里面输入命令 msck repair table order；
现在再select * 就有数据了。通过这种方式，可以很快导入数据到表格里面，而不用一个个alter ...add partition来导入。
34.3921
2
1
关注作者
收藏
评论(0)
发表评论
暂无数据
推荐帖子
CDA持证人阿涛哥
2025-02-11
0条评论
luoshaoj
2024-03-21
1条评论
液冷服务器
2023-10-26
0条评论