项目1 认识大数据 1
学习目标 1
项目描述 1
任务1.1 认知大数据，完成系统环境
搭建 1
任务描述 1
任务目标 2
知识准备 2
任务实施 16
任务1.2 Docker安装及常用命令 24
任务描述 24
任务目标 24
知识准备 24
任务实施 26
任务1.3 Hadoop环境搭建 33
任务描述 33
任务目标 33
知识准备 33
任务实施 34
项目小结 48
课后练习 48
项目2 Hive环境搭建与基本操作 49
学习目标 49
项目描述 49
任务2.1 Hive的安装与配置 49
任务描述 49
任务目标 49
知识准备 50
任务实施 53
任务2.2 Hive的应用 58
任务描述 58
任务目标 59
知识准备 59
任务实施 66
项目小结 74
课后练习 75
项目3 ZooKeeper环境搭建与应用 76
学习目标 76
项目描述 76
任务3.1 ZooKeeper的安装与配置 76
任务描述 76
任务目标 76
知识准备 77
任务实施 82
任务3.2 ZooKeeper CLI操作 94
任务描述 94
任务目标 94
知识准备 94
任务实施 96
项目小结 100
课后练习 101
项目4 HBase环境搭建与基本
操作 102
学习目标 102
项目描述 102
任务4.1 HBase的安装与配置 102
任务描述 102
任务目标 102
知识准备 103
任务实施 109
任务4.2 HBase Shell操作 119
任务描述 119
任务目标 119
知识准备 119
任务实施 120
项目小结 126
课后练习 127
项目5 Hadoop生态组件的安装与
使用 128
学习目标 128
项目描述 128
任务5.1 Sqoop的安装与使用 128
任务描述 128
任务目标 128
知识准备 129
任务实施 132
任务5.2 Pig的安装与使用 136
任务描述 136
任务目标 136
知识准备 136
任务实施 141
任务5.3 Flume的安装与使用 149
任务描述 149
任务目标 149
知识准备 149
任务实施 150
任务5.4 Kafka的安装与使用 152
任务描述 152
任务目标 152
知识准备 152
任务实施 155
任务5.5 Flink的安装与使用 157
任务描述 157
任务目标 157
知识准备 157
任务实施 160
项目小结 162
课后练习 162
项目6 Hadoop HA集群搭建 164
学习目标 164
项目描述 164
任务6.1 Hadoop HA集群环境
搭建 164
任务描述 164
任务目标 164
知识准备 165
任务实施 166
任务6.2 Hadoop HA集群的启动与
自动故障转移测试 178
任务描述 178
任务目标 178
知识准备 179
任务实施 179
项目小结 182
课后练习 182
项目7 Ambari搭建与集群管理 183
学习目标 183
项目描述 183
任务7.1 搭建Ambari平台 183
任务描述 183
任务目标 183
知识准备 184
任务实施 186
任务7.2 使用Ambari管理Hadoop
集群 207
任务描述 207
任务目标 207
知识准备 207
任务实施 207
项目小结 213
课后练习 213
项目8 Hadoop平台应用综合案例 214
学习目标 214
项目描述 214
任务8.1 本地数据集上传到
Hive中 214
任务描述 214
任务目标 214
任务实施 215
任务8.2 使用Hive进行简单的数据
分析 218
任务描述 218
任务目标 218
任务实施 218
任务8.3 Hive、MySQL、HBase数据
的互导 220
任务描述 220
任务目标 220
任务实施 220
任务8.4 流数据处理的简单应用 225
任务描述 225
任务目标 225
任务实施 226
项目小结 231
课后练习 232