注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

淘尽网 官方博客

淘尽网http://www.tao3w.com做最好的比价网站

 
 
 

日志

 
 
关于我

淘尽网 http://www.tao3w.com 做最好的比价网站,做最好的数据抓取专家。

网易考拉推荐

hadoop简明运行流程  

2012-09-26 15:10:07|  分类: 推荐系统 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

hadoop版本 hadoop-0.20.2

执行一个wordcount的mapreduce作业

1.启动hadoop

$ cd hadoop-0.20.2/bin

bin$ hadoop namenode -format

bin$ start-all.sh

bin$ jps

bin$ hadoop dfsadmin -safemode leave

2.生成数据

bin$ hadoop fs -mkdir input

bin$ hadoop fs -put /home/dic/input/163 input

bin$ hadoop fs -put /home/dic/input/sina input

bin$ hadoop fs -ls input

3.运行wordcount

bin$ hadoop jar ../hadoop-0.20.2/hadoop-0.20.2-examples.jar wordcount input output

4.检测输出

bin$ hadoop fs -ls output

参考http://www.cnblogs.com/viviancc/archive/2011/04/25/2027658.html

  评论这张
 
阅读(155)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2017