hdfs常用命令_写入到hdfs的表在哪个路径

合并数据，保存到本地
hadoop fs -cat  文件路径/* >本地路径

查看帮助
hdfs dfs -help 
    
查看当前目录信息
hdfs dfs -ls /
        
上传文件
hdfs dfs -put /本地路径 /hdfs路径

上传文件（如果已有该文件，覆盖）
hdfs dfs -put -f /本地路径 /hdfs路径
        
剪切文件
hdfs dfs -moveFromLocal a.txt /aa.txt
        
下载文件到本地
hdfs dfs -get /hdfs路径 /本地路径
        
合并下载
hdfs dfs -getmerge /hdfs路径文件夹 /合并后的文件
        
创建文件夹
hdfs dfs -mkdir /hello
        
创建多级文件夹
hdfs dfs -mkdir -p /hello/world
        
移动hdfs文件
hdfs dfs -mv /hdfs路径 /hdfs路径
        
复制hdfs文件
hdfs dfs -cp /hdfs路径 /hdfs路径
        
删除hdfs文件
hdfs dfs -rm /aa.txt
        
删除hdfs文件夹
hdfs dfs -rm -r /hello

直接删除目录（不放入回收站，如果是文件夹，加-r）
hdfs dfs -rm -skipTrash 目录
        
查看hdfs中的文件
hdfs dfs -cat /文件
hdfs dfs -tail -f /文件
        
查看文件夹中有多少个文件
hdfs dfs -count /文件夹
        
查看hdfs的总空间
hdfs dfs -df /
hdfs dfs -df -h /
        
修改副本数    
hdfs dfs -setrep 1 /a.txt

清空回收站
hdfs dfs -expunge

查看文本行数
hadoop fs -cat hdfs://172.168.0.11:8020/test/says_dict/sysdict_type.data |wc -l
 
查看文件大小(单位byte)
hadoop fs -du hdfs://172.168.0.11:8020/test/says_dict/*
 
hadoop fs -count hdfs://172.168.0.11:8020/test/says_dict/*
 
随机返回指定行数的样本数据
hadoop fs -cat /test/gonganbu/scence_suggestions/* | shuf -n 5
 
返回前几行的样本数据
hadoop fs -cat /test/gonganbu/scence_suggestions/* | head -100
 
返回最后几行的样本数据
hadoop fs -cat /test/gonganbu/scence_suggestions/* | tail -5
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79