皮皮网

皮皮网

【android 源码 windows】【文字游戏源码】【旅游网站源码】hadoop2.2 wordcount 源码

时间:2024-12-25 14:08:10 分类:热点

1.如何运行自带wordcount-Hadoop2
2.如何运行自带wordcount

hadoop2.2 wordcount 源码

android 源码 windows

如何运行自带wordcount-Hadoop2

android 源码 windows

       1.找到examples例子我们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:/hadoop/share/hadoop/mapreduce第二步:我们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。1.先在HDFS创建几个数据目录:1.hadoopfs-mkdir-p/data/wordcount2.hadoopfs-mkdir-p/output/2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。首先新建文件inputWord:1.vi/usr/inputWord新建完毕,查看内容:将本地文件上传到HDFS中:可以查看上传后的文件情况,执行如下命令:1.hadoopfs-ls/data/wordcount可以看到上传到HDFS中的文件。登录到Web控制台,访问链接可以看到任务记录情况。

android 源码 windows

如何运行自带wordcount

android 源码 windows

       ã€€ã€€1.找到examples例子

android 源码 windows

       ã€€ã€€æˆ‘们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:

android 源码 windows

       ã€€ã€€/hadoop/share/hadoop/mapreduce会看到如下图:

android 源码 windows

       ã€€ã€€hadoop-mapreduce-examples-2.2.0.jar

android 源码 windows

       ã€€ã€€ç¬¬äºŒæ­¥ï¼š

android 源码 windows

       ã€€ã€€æˆ‘们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。

android 源码 windows

       ã€€ã€€1.先在HDFS创建几个数据目录:

android 源码 windows

       ã€€ã€€hadoop fs -mkdir -p /data/wordcount

android 源码 windows

       ã€€ã€€hadoop fs -mkdir -p /output/

android 源码 windows

       ã€€ã€€2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。

android 源码 windows

       ã€€ã€€é¦–先新建文件inputWord:

android 源码 windows

       ã€€ã€€vi /usr/inputWord

android 源码 windows

       ã€€ã€€æ–°å»ºå®Œæ¯•ï¼ŒæŸ¥çœ‹å†…容:

android 源码 windows

       ã€€ã€€cat /usr/inputWord

android 源码 windows

       ã€€ã€€å°†æœ¬åœ°æ–‡ä»¶ä¸Šä¼ åˆ°HDFS中:

android 源码 windows

       ã€€ã€€hadoop fs -put /usr/inputWord /data/wordcount/

android 源码 windows

       ã€€ã€€å¯ä»¥æŸ¥çœ‹ä¸Šä¼ åŽçš„文件情况,执行如下命令:

android 源码 windows

       ã€€ã€€hadoop fs -ls /data/wordcount

android 源码 windows

       ã€€ã€€å¯ä»¥çœ‹åˆ°ä¸Šä¼ åˆ°HDFS中的文件。

android 源码 windows

       ã€€ã€€é€šè¿‡å‘½ä»¤

android 源码 windows

       ã€€ã€€hadoop fs -text /data/wordcount/inputWord

android 源码 windows

       ã€€ã€€çœ‹åˆ°å¦‚下内容:

android 源码 windows

       ã€€ã€€

android 源码 windows

       ã€€ã€€ä¸‹é¢ï¼Œè¿è¡ŒWordCount例子,执行如下命令:

android 源码 windows

       ã€€ã€€hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /data/wordcount /output/wordcount

android 源码 windows

       ã€€ã€€

android 源码 windows

       ã€€ã€€å¯ä»¥çœ‹åˆ°æŽ§åˆ¶å°è¾“出程序运行的信息

android 源码 windows

       ã€€ã€€æŸ¥çœ‹ç»“果,执行如下命令:

android 源码 windows

       ã€€ã€€hadoop fs -text /output/wordcount/part-r-

android 源码 windows

       ç»“果数据示例如下:

android 源码 windows

       ç™»å½•åˆ°Web控制台,访问链接http.//master:/可以看到任务记录情况。

android 源码 windows