1、分布式环境搭建
采用4台安装Linux环境的机器来构建一个小规模的分布式集群。
498)this.width=498;'' onmousewheel = ''javascript:return big(this)'' alt="" src="/uploadfile/201301/12/7B12161835.png" />
图1 集群的架构
其中有一台机器是Master节点,即名称节点,另外三台是Slaver节点,即数据节点。这四台机器彼此间通过路由器相连,从而实验相互通信以及数据传输。它们都可以通过路由器访问Internet,实验网页文档的采集。
2、集群机器详细信息
2.1 Master服务器
名称 | 详细信息 |
机器名称 | Master.Hadoop |
机器IP地址 | 192.168.1.2 |
最高用户名称(Name) | root |
最用用户密码(PWD) | hadoop(全小写) |
一般用户名称(Name) | hadoop(全小写) |
一般用户密码(PWD) | hadoop(全小写) |
名称 | 详细信息 |
机器名称 | Slave1.Hadoop |
机器IP地址 | 192.168.1.3 |
最高用户名称(Name) | root |
最用用户密码(PWD) | hadoop(全小写) |
一般用户名称(Name) | hadoop(全小写) |
一般用户密码(PWD) | hadoop(全小写) |
2.3 Slave2服务器
名称 | 详细信息 |
机器名称 | Slave2.Hadoop |
机器IP地址 | 192.168.1.4 |
最高用户名称(Name) | root |
最用用户密码(PWD) | hadoop(全小写) |
一般用户名称(Name) | hadoop(全小写) |
一般用户密码(PWD) | hadoop(全小写) |
2.4 Slave3服务器
名称 | 详细信息 |
机器名称 | Slave3.Hadoop |
机器IP地址 | 192.168.1.5 |
最高用户名称(Name) | root |
最用用户密码(PWD) | hadoop(全小写) |
一般用户名称(Name) | hadoop(全小写) |
一般用户密码(PWD) | hadoop(全小写) |
备注:
添