Hadoop + NFS 折腾

OpenStack/Juju/MAAS/CloudStack/Hadoop
回复
头像
oneleaf
论坛管理员
帖子: 10441
注册时间: 2005-03-27 0:06
系统: Ubuntu 12.04

Hadoop + NFS 折腾

#1

帖子 oneleaf » 2014-09-12 11:58

1 修改 hdfs-site.xml 加入:

代码: 全选

<property>
  <name>dfs.namenode.accesstime.precision</name>
  <value>3600000</value>
  </property>
<property>    
    <name>dfs.nfs3.dump.dir</name>    
    <value>/tmp/.hdfs-nfs</value>
  </property>
<property>
  <name>dfs.nfs.exports.allowed.hosts</name>
  <value>* rw</value>
</property>
2 修改 core-site.xml 加入:

代码: 全选

<property>
      <name>hadoop.proxyuser.hadoop.groups</name>
      <value>root,hadoop</value>
 </property>

 <property>
      <name>hadoop.proxyuser.hadoop.hosts</name>
      <value>127.0.0.1</value>
  </property>
3 重启 hadoop

4 以root身份执行

代码: 全选

hadoop portmap

代码: 全选

hadoop-daemon.sh start portmap
5 以hadoop身份执行

代码: 全选

hadoop nfs3

代码: 全选

hadoop-daemon.sh start nfs3
6 到NFS客户端运行 (192.168.1.62是hadoop服务器IP):

代码: 全选

showmount -e IP 192.168.1.62
挂载:

代码: 全选

sudo mount -t nfs -o vers=3,proto=tcp,nolock 192.168.1.62:/ /mnt
7 停止NFS服务:

代码: 全选

hadoop-daemon.sh stop nfs3
hadoop-daemon.sh stop portmap
onlylove
论坛版主
帖子: 5215
注册时间: 2007-01-14 16:23

Re: Hadoop + NFS 折腾

#2

帖子 onlylove » 2014-09-12 21:07

看一叶在玩很时髦的东西,说起来因为工作关系,还折腾过一阵子hadoop,不过看文件命名,像是1.2的,不是2.2
#include <stdio.h>
void main()
{
double world;
unsigned letter;
short stay;
long memories;
printf("I miss you.\n");
}
头像
oneleaf
论坛管理员
帖子: 10441
注册时间: 2005-03-27 0:06
系统: Ubuntu 12.04

Re: Hadoop + NFS 折腾

#3

帖子 oneleaf » 2014-09-12 22:19

:em09 是2.4
onlylove
论坛版主
帖子: 5215
注册时间: 2007-01-14 16:23

Re: Hadoop + NFS 折腾

#4

帖子 onlylove » 2014-09-13 0:32

都2.4了?我记得2.2的时候,mapreduce是分resourcemanager和nodemanager的,HDFS的忘了……好久不弄那个了……
#include <stdio.h>
void main()
{
double world;
unsigned letter;
short stay;
long memories;
printf("I miss you.\n");
}
回复