注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

SunOfMay的博客

At.163

 
 
 

日志

 
 

Ubuntu12 Hadoop1.x 部署后测试wordcount.  

2013-06-20 09:53:15|  分类: 默认分类 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

1. home目录下创建tmp文件夹.
   echo "hello world,this is first hadoop test" > /tmp/test1.txt
   echo "hello world,this is second hadoop test" > /tmp/test2.txt
   echo "hello world,this is third hadoop test" > /tmp/test3.txt
2. 本地文件cp到hdfs系统目录中
   hadoop dfs -copyFromLocal /tmp/  /tmp/test
3. 查看
   hadoop dfs -ls /tmp/test
4. 执行字符统计
   hadoop jar ~/hadoop/hadoop-examples-1.1.2.jar wordcount /tmp/test/ /tmp/output
5. 查看
   hadoop dfs -cat  /tmp/output/part*
   或者通过浏览器输入http://localohst:50070 --> Browse the filesystem --> 选择目录查看字符统计内容.
补充记录
1. hdfs 删除目录及子文件夹-rmr, 文件夹-rm. 重复执行上述4步会报错, 可使用此命令.
   hadoop dfs -rmr /tmp/output
2. hdfs 查看文件/为根目录, 可使用/tmp/, /tmp/test/等等.
   hadoop dfs -ls /
3. cp文件其他命令
   hadoop dfs -put ~/tmp/ /tmp/tt

菊子曰 菊子曰博客备份好助手
  评论这张
 
阅读(15)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2018