Hadoop大數據平臺部署與運維

目錄

項目1 大數據與Hadoop基礎入門 1
任務1.1 大數據概述 1
學習指導 1
情景任務 1
任務準備 1
任務實施 6
擴展提高 8
評價總結 9
課後練習 9
任務1.2 Hadoop簡介 10
學習指導 10
情景任務 10
任務準備 10
任務實施 15
擴展提高 17
評價總結 17
課後練習 17
項目2 Hadoop安裝與配置 19
任務2.1 環境準備 19
學習指導 19
情景任務 19
任務準備 19
任務實施 26
擴展提高 44
評價總結 44
課後練習 45
任務2.2 偽分布式安裝 45
學習指導 45
情景任務 46
任務準備 46
任務實施 47
擴展提高 60
評價總結 61
課後練習 61
任務2.3 全分布式安裝 62
學習指導 62
情景任務 62
任務準備 63
任務實施 70
擴展提高 88
評價總結 88
課後練習 89
項目3 Hadoop核心組件應用 90
任務3.1 HDFS基礎操作 90
學習指導 90
情景任務 90
任務準備 90
任務實施 93
擴展提高 96
評價總結 96
課後練習 96
任務3.2 MapReduce編程實踐 97
學習指導 97
情景任務 98
任務準備 98
任務實施 102
擴展提高 108
評價總結 108
課後練習 109
項目4 Hadoop生態系統探索 110
任務4.1 YARN資源管理與調度 110
學習指導 110
情景任務 110
任務準備 110
任務實施 113
擴展提高 120
評價總結 120
課後練習 121
任務4.2 ZooKeeper應用 122
學習指導 122
情景任務 122
任務準備 122
任務實施 127
擴展提高 133
評價總結 133
課後練習 134
任務4.3 Hive應用 134
學習指導 134
情景任務 135
任務準備 135
任務實施 140
擴展提高 148
評價總結 148
課後練習 149
任務4.4 HBase應用 150
學習指導 150
情景任務 150
任務準備 150
任務實施 156
擴展提高 166
評價總結 167
課後練習 167
任務4.5 Flume應用 168
學習指導 168
情景任務 168
任務準備 168
任務實施 172
擴展提高 176
評價總結 177
課後練習 177
任務4.6 Kafka應用 178
學習指導 178
情景任務 178
任務準備 178
任務實施 180
擴展提高 189
評價總結 189
課後練習 190
項目5 大數據優化和維護 192
任務5.1 Hadoop程序優化 192
學習指導 192
情景任務 192
任務準備 192
任務實施 199
擴展提高 200
評價總結 200
課後練習 201
任務5.2 Hadoop組件性能優化 202
學習指導 202
情景任務 202
任務準備 203
任務實施 207
擴展提高 212
評價總結 212
課後練習 213
任務5.3 數據備份與恢復 213
學習指導 213
情景任務 214
任務準備 214
任務實施 215
擴展提高 224
評價總結 225
課後練習 226
任務5.4 系統及核心組件升級 226
學習指導 226
情景任務 227
任務準備 227
任務實施 235
擴展提高 243
評價總結 243
課後練習 244
課後習題 246
項目1 大數據與Hadoop基礎入門 246
任務1.1 大數據概述 246
任務1.2 Hadoop簡介 248
項目2 Hadoop安裝與配置 249
任務2.1 環境準備 249
任務2.2 偽分布式安裝 251
任務2.3 全分布式安裝 254
項目3 Hadoop核心組件應用 258
任務3.1 HDFS基礎操作 258
任務3.2 MapReduce編程實踐 260
項目4 Hadoop生態系統探索 263
任務4.1 YARN資源管理與調度 263
任務4.2 ZooKeeper應用 264
任務4.3 Hive應用 265
任務4.4 HBase應用 267
任務4.5 Flume應用 269
任務4.6 Kafka應用 271
項目5 大數據優化和維護 272
任務5.1 Hadoop程序優化 272
任務5.2 Hadoop組件性能優化 276
任務5.3 數據備份與恢復 278
任務5.4 系統及核心組件升級 280