当前位置:   article > 正文

Hadoop安全云盘开发(第3篇)

hadoop网盘开发项目

第3篇

环境搭建完毕后,我们开始迫不急待地投入到项目的开发中。首先要解决的问题是如何在java代码中调用Hadoop HDFS Java API,对文件进行操作,包括文件的上传、下载、删除和移动等。其实这些操作并不困难,只要在网上搜一下,就有大量的例子代码,稍加修改,将相关参数改成本机的配置便可以完成。但是,在具体的实施之中,还是遇到了一些棘手的问题。我把网上下载的代码改好后,一运行就会报错。
这个问题可把我们难住了,我们一直以为是代码的错误,将代码一改再改,浪费了大约5天的时间,才把这个问题解决。我们仔细看了报出的错误,主要是涉及到一些权限的问题。原来由于Eclipse使用hadoop插件交作业时,会默认以DrWho身份将作业写入HDFS文件系统中,对应的也就是HDFS上的/user/hadoop,由于用户DrWho对目录并没有写入权限,所以会导致异常发生。需要在命令行中执行获取权限操作:$./hadoopfs-chmod777/。
这样,我们就顺利地在java代码中调用了Hadoop HDFS Java API。
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/IT小白/article/detail/824860
推荐阅读
相关标签
  

闽ICP备14008679号