当前位置:   article > 正文

Hadoop环境下用java代码实现hdfs远程文件的上传和下载_hdfs下载远程到hdfs

hdfs下载远程到hdfs

Hadoop环境下用java代码实现hdfs远程文件的上传和下载

一、新建maven工程

过程参考:
此处需要的jar包有:

<dependency>
          <groupId>org.apache.hadoop</groupId>
          <artifactId>hadoop-common</artifactId>
          <version>2.6.0</version>
      </dependency>
      <dependency>
          <groupId>org.apache.hadoop</groupId>
          <artifactId>hadoop-client</artifactId>
          <version>2.6.0</version>
      </dependency>
      <dependency>
          <groupId>org.apache.hadoop</groupId>
          <artifactId>hadoop-hdfs</artifactId>
          <version>2.6.0</version>
      </dependency>
      <dependency>
          <groupId>commons-logging</groupId>
          <artifactId>commons-logging</artifactId>
          <version>1.2</version>
      </dependency>
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20

二、文件的上传

此处需要导入的包:
ps:注意导入的是apache.hadoop的包
在这里插入图片描述

 public static void writeToHDFS(String hdfsFile, String hdfsURL, String fileName) 
    声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/721822
    推荐阅读
    相关标签
      

    闽ICP备14008679号