Hadoop大數(shù)據(jù)技術(shù)體系
定 價(jià)：56 元
- 作者：劉珊珊
- 出版時(shí)間：2025/5/1
- ISBN：9787121504129
- 出 版 社：電子工業(yè)出版社
- 中圖法分類：TP274
- 頁(yè)碼：219
- 紙張：
- 版次：01
- 開(kāi)本：16開(kāi)
本書是校企合作的成果，以大數(shù)據(jù)平臺(tái)運(yùn)維崗位的實(shí)際工作為核心，采用任務(wù)驅(qū)動(dòng)方式，全面介紹了 Hadoop 集群的安裝、監(jiān)控和優(yōu)化等關(guān)鍵技能。內(nèi)容涵蓋了從集群搭建到節(jié)點(diǎn)維護(hù)、分布式文件存儲(chǔ)操作、計(jì)算資源管理，再到集群調(diào)優(yōu)和應(yīng)用組件調(diào)優(yōu)，以及應(yīng)用組件的安裝與檢驗(yàn)等多個(gè)方面。本書遵循“實(shí)踐為主、理論為輔、注重實(shí)用性”的教育理念，在實(shí)際操作中融入理論知識(shí)點(diǎn)，幫助讀者更好地學(xué)習(xí)和掌握大數(shù)據(jù)分析與處理的關(guān)鍵技能。本書適合具備一定計(jì)算機(jī)基礎(chǔ)的讀者閱讀，可作為中等職業(yè)學(xué)校、高職高專計(jì)算機(jī)相關(guān)專業(yè)的教學(xué)用書，也可作為大數(shù)據(jù)技術(shù)培訓(xùn)的實(shí)訓(xùn)教材，同時(shí)可供相關(guān)技術(shù)領(lǐng)域的技術(shù)人員參考使用。
劉珊珊，副教授，廣東財(cái)貿(mào)職業(yè)學(xué)院教師，廣東省計(jì)算機(jī)用戶協(xié)會(huì)移動(dòng)互聯(lián)專委會(huì)委員。廣東省計(jì)算機(jī)學(xué)會(huì)移動(dòng)互聯(lián)網(wǎng)專業(yè)委員會(huì)常務(wù)委員，省級(jí)"軟件技術(shù)高水平專業(yè)群”負(fù)責(zé)人，省級(jí)軟件技術(shù)二類品牌專業(yè)負(fù)責(zé)人，主持廣東省教育廳2019年度廣東省普通高校重點(diǎn)科研平臺(tái)和項(xiàng)目，在研，主持；主持廣東省高職教育信息技術(shù)教指委教研教改項(xiàng)目2項(xiàng)，均已結(jié)題；主持校級(jí)"軟件技術(shù)專業(yè)教學(xué)創(chuàng)新團(tuán)隊(duì)”"軟件技術(shù)專業(yè)教學(xué)資源庫(kù)”等多項(xiàng)大型項(xiàng)目。
第一單元 Hadoop 集群的搭建 ……………………………………………………………… 1
任務(wù) 1 認(rèn)識(shí) Hadoop …………………………………………………………………… 2
1. 知識(shí)準(zhǔn)備 ………………………………………………………………………… 2
2. 課后實(shí)訓(xùn) ………………………………………………………………………… 5
任務(wù) 2 大數(shù)據(jù)服務(wù)云體驗(yàn) ……………………………………………………………… 8
1. 知識(shí)準(zhǔn)備 ………………………………………………………………………… 8
2. 任務(wù)實(shí)操 …………………………………………………………………………12
3. 課后實(shí)訓(xùn) …………………………………………………………………………15
任務(wù) 3 搭建 Hadoop 完全分布式集群 …………………………………………………17
1. 知識(shí)準(zhǔn)備 …………………………………………………………………………17
2. 任務(wù)實(shí)操 …………………………………………………………………………19
3. 課后實(shí)訓(xùn) …………………………………………………………………………36
第二單元? Hadoop 集群節(jié)點(diǎn)的運(yùn)行維護(hù) ………………………………………………… 41
任務(wù) 1 管理 Hadoop 集群節(jié)點(diǎn)運(yùn)行 ……………………………………………………42
1. 知識(shí)準(zhǔn)備 …………………………………………………………………………42
2. 任務(wù)實(shí)操 …………………………………………………………………………49
3. 課后實(shí)訓(xùn) …………………………………………………………………………55
任務(wù) 2 解決集群運(yùn)行中的 DataNode 故障 ……………………………………………58
1. 知識(shí)準(zhǔn)備 …………………………………………………………………………58
2. 任務(wù)實(shí)操 …………………………………………………………………………61
3. 課后實(shí)訓(xùn) …………………………………………………………………………62
任務(wù) 3 集群?jiǎn)?dòng)失敗 ……………………………………………………………………66
1. 知識(shí)準(zhǔn)備 …………………………………………………………………………66
2. 任務(wù)實(shí)操 …………………………………………………………………………69
Hadoop 大數(shù)據(jù)技術(shù)體系
3. 課后實(shí)訓(xùn) …………………………………………………………………………77
第三單元? Hadoop 集群文件的存儲(chǔ)管理 ………………………………………………… 86
任務(wù) 1 使用 Shell 命令操作 HDFS ……………………………………………………87
1. 知識(shí)準(zhǔn)備 …………………………………………………………………………87
2. 任務(wù)實(shí)操 …………………………………………………………………………93
3. 課后實(shí)訓(xùn) …………………………………………………………………………97
任務(wù) 2 合并 HDFS 小文件 …………………………………………………………… 101
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 101
2. 任務(wù)實(shí)操 ……………………………………………………………………… 103
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 106
任務(wù) 3 解決集群故障 ………………………………………………………………… 109
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 109
2. 任務(wù)實(shí)操 ……………………………………………………………………… 114
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 125
第四單元? Hadoop 集群計(jì)算資源的管理 ………………………………………………… 128
任務(wù) 1 使用 MapReduce 組件 ……………………………………………………… 129
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 129
2. 任務(wù)實(shí)操 ……………………………………………………………………… 133
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 138
任務(wù) 2 使用 Yarn 組件 ……………………………………………………………… 143
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 143
2. 任務(wù)實(shí)操 ……………………………………………………………………… 156
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 163
第五單元? 組件的安裝與應(yīng)用……………………………………………………………… 167
任務(wù) 1 安裝與應(yīng)用 Flume 組件 ……………………………………………………… 168
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 168
2. 任務(wù)實(shí)操 ……………………………………………………………………… 171
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 176
任務(wù) 2 安裝與應(yīng)用 Hive 組件 ……………………………………………………… 180
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 180
2. 任務(wù)實(shí)操 ……………………………………………………………………… 185
3. 課后實(shí)訓(xùn) ……………………………………………………………………… 195
第六單元? 集群調(diào)優(yōu)和應(yīng)用組件調(diào)優(yōu)……………………………………………………… 201
1. 知識(shí)準(zhǔn)備 ……………………………………………………………………… 202
2. 課后實(shí)訓(xùn) ……………………………………………………………………… 209
書單推薦
