欢迎来到皮皮网网首页

【微领袖源码】【pic官网源码】【苹果托管平台源码】hadoop2.2 wordcount 源码

来源:微信小程序五子棋源码下载 时间:2024-11-25 03:43:55

1.如何运行自带wordcount-Hadoop2
2.如何运行自带wordcount

hadoop2.2 wordcount 源码

微领袖源码

如何运行自带wordcount-Hadoop2

微领袖源码

       1.找到examples例子我们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:/hadoop/share/hadoop/mapreduce第二步:我们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。1.先在HDFS创建几个数据目录:1.hadoopfs-mkdir-p/data/wordcount2.hadoopfs-mkdir-p/output/2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。首先新建文件inputWord:1.vi/usr/inputWord新建完毕,查看内容:将本地文件上传到HDFS中:可以查看上传后的文件情况,执行如下命令:1.hadoopfs-ls/data/wordcount可以看到上传到HDFS中的文件。登录到Web控制台,访问链接可以看到任务记录情况。

微领袖源码

如何运行自带wordcount

微领袖源码

       ã€€ã€€1.找到examples例子

微领袖源码

       ã€€ã€€æˆ‘们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:

微领袖源码

       ã€€ã€€/hadoop/share/hadoop/mapreduce会看到如下图:

微领袖源码

       ã€€ã€€hadoop-mapreduce-examples-2.2.0.jar

微领袖源码

       ã€€ã€€ç¬¬äºŒæ­¥ï¼š

微领袖源码

       ã€€ã€€æˆ‘们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。

微领袖源码

       ã€€ã€€1.先在HDFS创建几个数据目录:

微领袖源码

       ã€€ã€€hadoop fs -mkdir -p /data/wordcount

微领袖源码

       ã€€ã€€hadoop fs -mkdir -p /output/

微领袖源码

       ã€€ã€€2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。

微领袖源码

       ã€€ã€€é¦–先新建文件inputWord:

微领袖源码

       ã€€ã€€vi /usr/inputWord

微领袖源码

       ã€€ã€€æ–°å»ºå®Œæ¯•ï¼ŒæŸ¥çœ‹å†…容:

微领袖源码

       ã€€ã€€cat /usr/inputWord

微领袖源码

       ã€€ã€€å°†æœ¬åœ°æ–‡ä»¶ä¸Šä¼ åˆ°HDFS中:

微领袖源码

       ã€€ã€€hadoop fs -put /usr/inputWord /data/wordcount/

微领袖源码

       ã€€ã€€å¯ä»¥æŸ¥çœ‹ä¸Šä¼ åŽçš„文件情况,执行如下命令:

微领袖源码

       ã€€ã€€hadoop fs -ls /data/wordcount

微领袖源码

       ã€€ã€€å¯ä»¥çœ‹åˆ°ä¸Šä¼ åˆ°HDFS中的文件。

微领袖源码

       ã€€ã€€é€šè¿‡å‘½ä»¤

微领袖源码

       ã€€ã€€hadoop fs -text /data/wordcount/inputWord

微领袖源码

       ã€€ã€€çœ‹åˆ°å¦‚下内容:

微领袖源码

       ã€€ã€€

微领袖源码

       ã€€ã€€ä¸‹é¢ï¼Œè¿è¡ŒWordCount例子,执行如下命令:

微领袖源码

       ã€€ã€€hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /data/wordcount /output/wordcount

微领袖源码

       ã€€ã€€

微领袖源码

       ã€€ã€€å¯ä»¥çœ‹åˆ°æŽ§åˆ¶å°è¾“出程序运行的信息

微领袖源码

       ã€€ã€€æŸ¥çœ‹ç»“果,执行如下命令:

微领袖源码

       ã€€ã€€hadoop fs -text /output/wordcount/part-r-

微领袖源码

       ç»“果数据示例如下:

微领袖源码

       ç™»å½•åˆ°Web控制台,访问链接http.//master:/可以看到任务记录情况。

微领袖源码