隨著互聯(lián)網(wǎng)的高速發(fā)展，使用網(wǎng)絡(luò)的用戶(hù)越來(lái)越多，人們?cè)谑褂镁W(wǎng)絡(luò)的過(guò)程中產(chǎn)生了數(shù)量龐大的數(shù)據(jù)，這些數(shù)據(jù)極具商業(yè)價(jià)值，所以對(duì)這些數(shù)據(jù)的有效存儲(chǔ)、管理、計(jì)算分析和應(yīng)用就成為信息行業(yè)迫切需要解決的問(wèn)題。大數(shù)據(jù)技術(shù)就是基于這種數(shù)據(jù)爆炸的現(xiàn)狀產(chǎn)生的。那到底怎樣才能解決海量數(shù)據(jù)的存儲(chǔ)和計(jì)算分析等問(wèn)題呢？Hadoop應(yīng)運(yùn)而生了。
Hadoop是一個(gè)能夠?qū)�海量�?shù)據(jù)進(jìn)行分布式處理的軟件框架，它以一種可靠、高效、可伸縮的方式進(jìn)行數(shù)據(jù)處理，用戶(hù)可以輕松地在Hadoop上開(kāi)發(fā)和運(yùn)行處理海量數(shù)據(jù)的應(yīng)用程序。Hadoop 設(shè)計(jì)之初的目標(biāo)就定位于高可靠性、高可拓展性、高容錯(cuò)性和高效性，正是這些設(shè)計(jì)上與生俱來(lái)的優(yōu)點(diǎn)，才使得Hadoop一出現(xiàn)就受到眾多大公司的青睞，在互聯(lián)網(wǎng)領(lǐng)域得到了廣泛運(yùn)用。
本書(shū)采用理論 實(shí)戰(zhàn)的形式編寫(xiě)，不但全面介紹了大數(shù)據(jù)技術(shù)生態(tài)圈，更在此基礎(chǔ)上全景展現(xiàn)了Hadoop大數(shù)據(jù)分布式系統(tǒng)集群平臺(tái)的搭建、大數(shù)據(jù)分布式文件系統(tǒng)HDFS（Hadoop Distributed File System）、大數(shù)據(jù)分布式并行計(jì)算框架MapReduce、Hadoop大數(shù)據(jù)倉(cāng)庫(kù)工具Hive和海量日志采集工具Flume等大數(shù)據(jù)實(shí)用技術(shù)，后通過(guò)一個(gè)完整的Hive數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目，深入講解了大數(shù)據(jù)技術(shù)在實(shí)際工作中的應(yīng)用。本書(shū)通俗易懂、結(jié)構(gòu)清晰，內(nèi)容層層遞進(jìn)，理論與實(shí)踐相結(jié)合，著重于分析解決問(wèn)題的思路和具體實(shí)施過(guò)程。書(shū)中包含大量的案例講解和練習(xí)，通過(guò)從案例需求到案例實(shí)現(xiàn)這一完整流程的體驗(yàn)，可以幫助讀者真正理解與消化Hadoop大數(shù)據(jù)技術(shù)。書(shū)中案例全部源于企業(yè)真實(shí)項(xiàng)目，可操作性強(qiáng)，可輕松引導(dǎo)讀者融會(huì)貫通相關(guān)技術(shù)。
本書(shū)特色：
（1）重點(diǎn)突出，理論與實(shí)踐結(jié)合，適合教學(xué)使用。
（2）內(nèi)容結(jié)構(gòu)完整，可循序漸進(jìn)地教學(xué)。
（3）以圖文并茂的方式展示了大數(shù)據(jù)應(yīng)用程序的設(shè)計(jì)與實(shí)現(xiàn)過(guò)程。
另外，本書(shū)配套資源豐富，掃描書(shū)中二維碼除了可以得到相應(yīng)的程序源代碼、教學(xué)PPT、課后練習(xí)之外，更有海量教學(xué)視頻。視頻囊括了書(shū)中介紹的所有內(nèi)容，所有的實(shí)踐案例也通過(guò)教學(xué)視頻加以講解，內(nèi)容充實(shí)。
后，本書(shū)的附錄中還介紹了一個(gè)使用可視化在線(xiàn)云開(kāi)發(fā)平臺(tái)道捷實(shí)訓(xùn)云平臺(tái)（www.yun.51dcool.com)完成的項(xiàng)目，該項(xiàng)目直接使用道捷實(shí)訓(xùn)云模擬的分布式物理集群，計(jì)算每個(gè)學(xué)生相應(yīng)科目的平均分，然后將同一個(gè)科目的成績(jī)放在一個(gè)文件中，并按照平均分從高到低排序，省去了我們自己搭建大數(shù)據(jù)集群的時(shí)間，極大地提高了工作效率。
本書(shū)是為所有熱愛(ài)大數(shù)據(jù)、打算從事大數(shù)據(jù)相關(guān)工作的讀者編寫(xiě)的，適合有Java編程基礎(chǔ)的學(xué)習(xí)者參考使用，也適合作為高等院校、培訓(xùn)機(jī)構(gòu)的大數(shù)據(jù)技術(shù)教材。由于時(shí)間倉(cāng)促，編者水平有限，書(shū)中難免有疏漏之處，敬請(qǐng)讀者批評(píng)指正！

編 者
2021年2月