Hadoop安装手册_Hadoop2.0-v1.6

Hadoop2.0安装手册目录

第1章安装VMWare Workstation 10 (4)

第2章VMware 10安装CentOS 6 (10)

2.1 CentOS系统安装 (10)

2.2 安装中的关键问题 (13)

2.3 克隆HadoopSlave (17)

2.4 windows中安装SSH Secure Shell Client传输软件 (19)

第3章CentOS 6安装Hadoop (23)

3.1 启动两台虚拟客户机 (23)

3.2 Linux系统配置 (24)

3.2.1软件包和数据包说明 (25)

3.2.2配置时钟同步 (25)

3.2.3配置主机名 (26)

3.2.5使用setup 命令配置网络环境 (27)

3.2.6关闭防火墙 (29)

3.2.7配置hosts列表 (30)

3.2.8安装JDK (31)

3.2.9免密钥登录配置 (32)

3.3 Hadoop配置部署 (34)

3.3.1 Hadoop安装包解压 (34)

3.3.2配置环境变量hadoop-env.sh (34)

3.3.3配置环境变量yarn-env.sh (35)

3.3.4配置核心组件core-site.xml (35)

3.3.5配置文件系统hdfs-site.xml (35)

3.3.6配置文件系统yarn-site.xml (36)

3.3.7配置计算框架mapred-site.xml (37)

3.3.8 在master节点配置slaves文件 (37)

3.3.9 复制到从节点 (37)

3.4 启动Hadoop集群 (37)

3.4.1 配置Hadoop启动的系统环境变量 (38)

3.4.2 创建数据目录 (38)

3.4.3启动Hadoop集群 (38)

第4章安装部署Hive (44)

4.1 解压并安装Hive (44)

4.2 安装配置MySQL (45)

4.3 配置Hive (45)

4.4 启动并验证Hive安装 (46)

第5章安装部署HBase (49)

5.1 解压并安装HBase (49)

5.2 配置HBase (50)

5.2.1 修改环境变量hbase-env.sh (50)

5.2.2 修改配置文件hbase-site.xml (50)

5.2.3 设置regionservers (51)

第1章安装VMWare Workstation 10

5.2.4 设置环境变量 (51)

5.2.5 将HBase安装文件复制到HadoopSlave节点 (51)

5.3 启动并验证HBase (51)

第6章安装部署Mahout (54)

6.1 解压并安装Mahout (54)

6.2 启动并验证Mahout (55)

第7章安装部署Sqoop (57)

7.1 解压并安装Sqoop (57)

7.2 配置Sqoop (58)

7.2.1 配置MySQL连接器 (58)

7.2.2配置环境变量 (58)

7.3 启动并验证Sqoop (59)

第8章安装部署Spark (61)

8.1 解压并安装Spark (61)

8.2 配置Hadoop环境变量 (62)

8.3 验证Spark安装 (62)

第9章安装部署Storm (66)

安装Storm依赖包 (66)

9.1安装ZooKeeper集群 (66)

9.1.1解压安装 (66)

9.1.2配置ZooKeeper属性文件 (67)

9.1.3 将Zookeeper安装文件复制到HadoopSlave节点 (68)

9.1.3启动ZooKeeper集群 (68)

9.2安装Storm (69)

9.2.1 解压安装 (69)

9.2.2修改storm.yaml配置文件 (70)

9.2.3 将Storm安装文件复制到HadoopSlave节点 (70)

9.2.4启动Storm集群 (70)

9.2.5向Storm集群提交任务 (71)

第10章安装部署Kafka (73)

10.1. 安装Kafka (73)

10.1.1下载Kafka安装文件 (73)

10.2. 配置Kafka (73)

10.3. 启动Kafka (74)

第1章安装VMWare Workstation 10

第1章

安装VMWare 10

主要内容

安装VMWare Workstation 10

第1章安装VMWare Workstation 10 在软件包中找到“software\vmware”目录并进入该目录，如下所示：

点击“VMware-workstation-full-10.0.0-1295980.exe”安装

2

等待安装软件检测和解压以后，出现如下界面，直接单击下一步即可。

选择我同意选项，直接下一步。

4

典型安装和自定义安装，可根据自己的情况酌情选择。这里我们选择自定义安装。

5

选择自定义以后，根据自己的情况选择自己需要的功能。这里我们选择全部。

6

我们可以更改软件的安装路径，端口默认即可。