皮皮网

1.如何运行自带wordcount-Hadoop2
2.如何运行自带wordcount

如何运行自带wordcount-Hadoop2

       1.找到examples例子我们需要找打这个例子的位置：首先需要找到你的hadoop文件夹，然后依照下面路径：/hadoop/share/hadoop/mapreduce第二步：我们需要需要做一下运行需要的工作，比如输入输出路径，上传什么文件等。1.先在HDFS创建几个数据目录：1.hadoopfs-mkdir-p/data/wordcount2.hadoopfs-mkdir-p/output/2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件，运行这个MapReduce任务的结果输出到/output/wordcount目录中。首先新建文件inputWord：1.vi/usr/inputWord新建完毕，查看内容：将本地文件上传到HDFS中：可以查看上传后的文件情况，执行如下命令：1.hadoopfs-ls/data/wordcount可以看到上传到HDFS中的文件。登录到Web控制台，访问链接可以看到任务记录情况。

如何运行自带wordcount

       ã€€ã€€1.找到examples例子

       ã€€ã€€æˆ‘们需要找打这个例子的位置：首先需要找到你的hadoop文件夹，然后依照下面路径：

       ã€€ã€€/hadoop/share/hadoop/mapreduce会看到如下图：

       ã€€ã€€hadoop-mapreduce-examples-2.2.0.jar

       ã€€ã€€ç¬¬äºŒæ­¥ï¼š

       ã€€ã€€æˆ‘们需要需要做一下运行需要的工作，比如输入输出路径，上传什么文件等。

       ã€€ã€€1.先在HDFS创建几个数据目录：

       ã€€ã€€hadoop fs -mkdir -p /data/wordcount

       ã€€ã€€hadoop fs -mkdir -p /output/

       ã€€ã€€2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件，运行这个MapReduce任务的结果输出到/output/wordcount目录中。

       ã€€ã€€é¦–先新建文件inputWord：

       ã€€ã€€vi /usr/inputWord

       ã€€ã€€æ–°å»ºå®Œæ¯•ï¼ŒæŸ¥çœ‹å†…容：

       ã€€ã€€cat /usr/inputWord

       ã€€ã€€å°†æœ¬åœ°æ–‡ä»¶ä¸Šä¼ åˆ°HDFS中：

       ã€€ã€€hadoop fs -put /usr/inputWord /data/wordcount/

       ã€€ã€€å¯ä»¥æŸ¥çœ‹ä¸Šä¼ åŽçš„文件情况，执行如下命令：

       ã€€ã€€hadoop fs -ls /data/wordcount

       ã€€ã€€å¯ä»¥çœ‹åˆ°ä¸Šä¼ åˆ°HDFS中的文件。

       ã€€ã€€é€šè¿‡å‘½ä»¤

       ã€€ã€€hadoop fs -text /data/wordcount/inputWord

       ã€€ã€€çœ‹åˆ°å¦‚下内容：

       ã€€ã€€

       ã€€ã€€ä¸‹é¢ï¼Œè¿è¡ŒWordCount例子，执行如下命令：

       ã€€ã€€hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /data/wordcount /output/wordcount

       ã€€ã€€

       ã€€ã€€å¯ä»¥çœ‹åˆ°æŽ§åˆ¶å°è¾“出程序运行的信息

       ã€€ã€€æŸ¥çœ‹ç»“果，执行如下命令：

       ã€€ã€€hadoop fs -text /output/wordcount/part-r-

       ç»“果数据示例如下：

       ç™»å½•åˆ°Web控制台，访问链接http.//master:/可以看到任务记录情况。