123,123,123

內(nèi)容簡(jiǎn)介

　　本書是為所有熱愛大數(shù)據(jù)、打算從事大數(shù)據(jù)相關(guān)工作的讀者編寫的，適合有Java編程基礎(chǔ)的學(xué)習(xí)者參考使用。本書全面介紹了大數(shù)據(jù)技術(shù)生態(tài)圈，更在此基礎(chǔ)上全景展現(xiàn)了Hadoop大數(shù)據(jù)分布式系統(tǒng)集群平臺(tái)的搭建、大數(shù)據(jù)分布式文件系統(tǒng)HDFS、大數(shù)據(jù)分布式并行計(jì)算框架MapReduce、Hadoop大數(shù)據(jù)倉庫工具Hive和海量日志采集工具Flume等大數(shù)據(jù)實(shí)用技術(shù)。本書通俗易懂、結(jié)構(gòu)清晰，著重于分析解決問題的思路和具體實(shí)施過程。本書適合作為高等院校計(jì)算機(jī)相關(guān)專業(yè)的程序設(shè)計(jì)教材，也可作為Hadoop技術(shù)的培訓(xùn)圖書。

作者簡(jiǎn)介

　　智酷道捷是中關(guān)村智酷雙創(chuàng)人才服務(wù)股份有限公司下屬高科技教育企業(yè)。旨在打造“產(chǎn)、學(xué)、研、用”雙創(chuàng)一體化深度融合的智能化泛 IT 產(chǎn)教綜合服務(wù)平臺(tái)。是一家專注于面向高校提供“產(chǎn)、學(xué)、研、用”一體化雙創(chuàng)實(shí)踐性教學(xué)解決方案，面向高新技術(shù)職業(yè)技能持續(xù)培育的創(chuàng)新型科技教育企業(yè)。公司專注于前沿技術(shù)——基于云計(jì)算、大數(shù)據(jù)、以及智能化控制等高新技術(shù)開發(fā)的全新資源與服務(wù)平臺(tái)。公司借鑒發(fā)達(dá)國(guó)家先進(jìn)的技術(shù)應(yīng)用教學(xué)經(jīng)驗(yàn)并結(jié)合中國(guó)國(guó)情，創(chuàng)新提出“雙創(chuàng)雙元、雙元雙通”理論模型，通過“工程實(shí)踐中心”這一創(chuàng)新載體，整合高校教育與產(chǎn)業(yè)實(shí)踐應(yīng)用，基于云平臺(tái)的大數(shù)據(jù)反饋和自適應(yīng)機(jī)制，打造形成以產(chǎn)業(yè)應(yīng)用需求為引領(lǐng)，以崗位技能能力圖表為核心線索的智能化課程研發(fā)體系，將產(chǎn)業(yè)應(yīng)用需求、高校教育過程以及課程研發(fā)機(jī)制、產(chǎn)教協(xié)同育人進(jìn)行一體化聯(lián)動(dòng)和融合，實(shí)現(xiàn)雙創(chuàng)實(shí)踐性應(yīng)用人才智能化、生態(tài)化、個(gè)性化、本地化培育，為地方企業(yè)和高校提供優(yōu)質(zhì)的實(shí)踐性課程與人才服務(wù)。

圖書目錄

第1章初識(shí)Hadoop及HDFS分布式系統(tǒng)1
1.1 初識(shí)Hadoop1
1.1.1大數(shù)據(jù)概述1
1.1.2大數(shù)據(jù)技術(shù)2
1.1.3Hadoop簡(jiǎn)介3
1.2 分布式文件系統(tǒng)（HDFS）6
1.2.1分布式文件系統(tǒng)6
1.2.2HDFS的定義7
1.3 Hadoop偽分布式環(huán)境搭建12
1.3.1Hadoop安裝的三種模式 12
1.3.2搭建的準(zhǔn)備工作 12
1.3.3Hadoop相關(guān)配置12
1.3.4啟動(dòng)Hadoop13
1.4 HDFS常用命令與應(yīng)用13
1.4.1HDFS命令行基本操作 13
1.4.2HDFS Java API的核心類
和接口21
1.4.3基于Java API的編程實(shí)例 21
小結(jié)55
習(xí)題55
第2章分布式協(xié)調(diào)服務(wù)——ZooKeeper
和HDFS高可用性56
2.1 ZooKeeper的作用和基本概念56
2.1.1分布式應(yīng)用概述56
2.1.2分布式應(yīng)用的優(yōu)缺點(diǎn)57
2.1.3ZooKeeper 的概念和特點(diǎn)58
2.1.4ZooKeeper 的主要應(yīng)用58
2.1.5ZooKeeper的架構(gòu)58
2.1.6數(shù)據(jù)模型與層次命名空間59
2.1.7Znode的類型59
2.2 ZooKeeper集群的搭建60
2.3 ZooKeeper操作與API編程69
2.3.1服務(wù)端常用命令 69
2.3.2客戶端連接ZooKeeper的
相關(guān)操作70
2.3.3使用Java API訪問
ZooKeeper75
2.3.4使用Java API編程
——入門案例75
2.3.5使用Java API編程
——官方案例解讀93
2.4 ZooKeeper原理分析105
2.4.1一致性協(xié)議——Zab協(xié)議105
2.4.2Leader選舉106
2.5 高可用108
2.6 HDFS緩存108
2.7 HDFS完全分布式搭建115
2.8 HDFS高可用架構(gòu)搭建116
2.8.1HDFS的基本架構(gòu)116
2.8.2HDFS高可用架構(gòu)116
2.8.3高可用架構(gòu)搭建思路117
小結(jié)118
習(xí)題118
第3章分布式并行計(jì)