当前位置:   article > 正文

调用MapReduce对文件中各个单词出现次数进行统计_elcipse怎么统计每个字母出现的cishu

elcipse怎么统计每个字母出现的cishu

调用MapReduce对文件中各个单词出现次数进行统计

实验配置:系统:Ubuntu Kylin | 环境:Hadoop | 软件:Eclipse


要求
1.将待分析的文件(不少于10000英文单词)上传到HDFS
2.调用MapReduce对文件中各个单词出现的次数进行统计
3.将统计结果下载本地。


操作步骤:调用MapReduce执行WordCount对单词进行计数**
一:
• 1. 在Eclipse中创建项目
• 2. 为项目添加需要用到的JAR包
• 3. 编写Java应用程序
• 4. 编译运行程序
• 5. 应用程序部署

二:
• 1. 在Eclipse中创建项目
• 2. 为项目添加需要用到的JAR包
• 3. 编写Java应用程序
• 4. 编译打包程序
• 5. 运行程序


(一):
1.打开Eclipse,需要填写workspace(工作空间),用来保存程序所在的位置,这里按照默认,不需要改动,如下图,点击“OK”按钮,进入Eclipse软件。
在这里插入图片描述
2.选择“File->New->Java Project”菜单,开始创建一个Java工程,如下图所示
在这里插入图片描述
(二):
1.进行下一步设置,如下图
在这里插入图片描述
2.点击界面中的“Libraries”选项卡,然后,点击界面右侧的“Add External JARs…”,如下图
在这里插入图片描述
3.进入到common目录,然后,界面会显示出common目录下的所有内容,用鼠标点击选中hadoop-common-2.7.1.jar和haoop-nfs-2.7.1.jar,然后点击界面右下角的“确定”按钮,就可以把这两个JAR包增加到当前Java工程中,如下图
在这里插入图片描述
在这里插入图片描述
从这个界面中可以看出,hadoop-common-2.7.1.jar和haoop-nfs-2.7.1.jar已经被添加到当前Java工程中。然后,按照类似的操作方法,可以再次点击“Add External JARs…”按钮,把剩余的其他JAR包都添加进来。需要注意的是,当需要选中某个目录下的所有JAR包时,可以使用“Ctrl+A”组合键进行全选操作。全部添加完毕以后,就可以点击界面右下角的“Finish”按钮,完成Java工程HDFSExample的创建。
(三):
1.在创建好的工程名称“HDFSExample”右键菜单中
选择New->Class,如下图
在这里插入图片描述

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Monodyee/article/detail/337581
推荐阅读
相关标签
  

闽ICP备14008679号