領(lǐng)先的實(shí)用技能——打造云計(jì)算工程師

科學(xué)的訓(xùn)練模式——授人以漁而不只是作品臨摹

真實(shí)的項(xiàng)目驅(qū)動(dòng)——行業(yè)知識(shí)與專業(yè)設(shè)計(jì)相呼應(yīng)

便捷的學(xué)習(xí)體驗(yàn)——傳統(tǒng)教材與二維碼革命性攜手

“互聯(lián)網(wǎng)+人工智能”時(shí)代，新技術(shù)的發(fā)展可謂是一日千里，云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)、區(qū)塊鏈、虛擬現(xiàn)實(shí)、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等等，已經(jīng)形成一波新的科技浪潮。以云計(jì)算為例，國內(nèi)云計(jì)算市場(chǎng)的蛋糕正變得越來越誘人，以下列舉了2016年以來發(fā)生的部分大事。

1．中國聯(lián)通發(fā)布云計(jì)算策略，并同步發(fā)起成立“中國聯(lián)通沃云+云生態(tài)聯(lián)盟”，全面開啟云服務(wù)新時(shí)代。

2．內(nèi)蒙古斥資500億元欲打造亞洲最大云計(jì)算數(shù)據(jù)中心。

3．騰訊云升級(jí)為平臺(tái)級(jí)戰(zhàn)略，旨在探索云上生態(tài)，實(shí)現(xiàn)全面開放，構(gòu)建可信賴的云生態(tài)體系。

4．百度正式發(fā)布“云計(jì)算+大數(shù)據(jù)+人工智能”三位一體的云戰(zhàn)略。

5．亞馬遜AWS和北京光環(huán)新網(wǎng)科技股份有限公司聯(lián)合宣布：由光環(huán)新網(wǎng)負(fù)責(zé)運(yùn)營的AWS中國（北京）區(qū)域在中國正式商用。

6. 來自Forrester的報(bào)告認(rèn)為，AWS和OpenStack是公有云和私有云事實(shí)上的標(biāo)準(zhǔn)。

7．網(wǎng)易正式推出“網(wǎng)易云”。網(wǎng)易將先行投入數(shù)十億人民幣，發(fā)力云計(jì)算領(lǐng)域。

8．金山云重磅發(fā)布“大米”云主機(jī)，這是一款專為創(chuàng)業(yè)者而生的性能王云主機(jī)，采用自建11線BGP全覆蓋以及VPC私有網(wǎng)絡(luò)，全方位保障數(shù)據(jù)安全。

DT時(shí)代，企業(yè)對(duì)傳統(tǒng)IT架構(gòu)的需求減弱，不少傳統(tǒng)IT企業(yè)的技術(shù)人員，面臨失業(yè)風(fēng)險(xiǎn)。全球最知名的職業(yè)社交平臺(tái)LinkedIn發(fā)布報(bào)告，最受雇主青睞的十大職業(yè)技能中“云計(jì)算”名列前茅。2016年，中國企業(yè)云服務(wù)整體市場(chǎng)規(guī)模超500億元，預(yù)計(jì)未來幾年仍將保持約30%的年復(fù)合增長率。未來5年，整個(gè)社會(huì)對(duì)云計(jì)算人才的需求缺口將高達(dá)130萬。從傳統(tǒng)的IT工程師轉(zhuǎn)型為云計(jì)算與大數(shù)據(jù)專家，已經(jīng)成為一種趨勢(shì)。

基于云計(jì)算這樣的大環(huán)境，課工場(chǎng)（kgc.cn）的教研團(tuán)隊(duì)幾年前開始策劃的“云計(jì)算工程師系列”教材應(yīng)運(yùn)而生，它旨在幫助讀者朋友快速成長為符合企業(yè)需求的、優(yōu)秀的云計(jì)算工程師。這套教材是目前業(yè)界最全面、專業(yè)的云計(jì)算課程體系，能夠滿足企業(yè)對(duì)高級(jí)復(fù)合型人才的要求。參與本書編寫的院校老師還有吳振宇、楊智勇、胡文杰趙紅艷等。

課工場(chǎng)是北京大學(xué)下屬企業(yè)北京課工場(chǎng)教育科技有限公司推出的互聯(lián)網(wǎng)教育平臺(tái)，專注于互聯(lián)網(wǎng)企業(yè)各崗位人才的培養(yǎng)。平臺(tái)匯聚了數(shù)百位來自知名培訓(xùn)機(jī)構(gòu)、高校的頂級(jí)名師和互聯(lián)網(wǎng)企業(yè)的行業(yè)專家，面向大學(xué)生以及需要“充電”的在職人員，針對(duì)與互聯(lián)網(wǎng)相關(guān)的產(chǎn)品設(shè)計(jì)、開發(fā)、運(yùn)維、推廣和運(yùn)營等崗位，提供在線的直播和錄播課程，并通過遍及全國的幾十家線下服務(wù)中心提供現(xiàn)場(chǎng)面授以及多種形式的教學(xué)服務(wù)，并同步研發(fā)出版最新的課程教材。

除了教材之外，課工場(chǎng)還提供各種學(xué)習(xí)資源和支持，包括：

現(xiàn)場(chǎng)面授課程

在線直播課程

錄播視頻課程

授課PPT課件

案例素材下載

擴(kuò)展資料提供

學(xué)習(xí)交流社區(qū)

QQ討論組（技術(shù)，就業(yè)，生活）

以上資源請(qǐng)?jiān)L問課工場(chǎng)網(wǎng)站www.kgc.cn。

本套教材特點(diǎn)

（1）科學(xué)的訓(xùn)練模式

科學(xué)的課程體系。

創(chuàng)新的教學(xué)模式。

技能人脈，實(shí)現(xiàn)多方位就業(yè)。

隨需而變，支持終身學(xué)習(xí)。

（2）企業(yè)實(shí)戰(zhàn)項(xiàng)目驅(qū)動(dòng)

覆蓋企業(yè)各項(xiàng)業(yè)務(wù)所需的IT技能。

幾十個(gè)實(shí)訓(xùn)項(xiàng)目，快速積累一線實(shí)踐經(jīng)驗(yàn)。

（3）便捷的學(xué)習(xí)體驗(yàn)

提供二維碼掃描，可以觀看相關(guān)視頻講解和擴(kuò)展資料等知識(shí)服務(wù)。

課工場(chǎng)開辟教材配套版塊，提供素材下載、學(xué)習(xí)社區(qū)等豐富的在線學(xué)習(xí)資源。

讀者對(duì)象

（1）初學(xué)者：本套教材將幫助你快速進(jìn)入云計(jì)算及運(yùn)維開發(fā)行業(yè)，從零開始逐步成長為專業(yè)的云計(jì)算及運(yùn)維開發(fā)工程師。

（2）初中級(jí)運(yùn)維及運(yùn)維開發(fā)者：本套教材將帶你進(jìn)行全面、系統(tǒng)的云計(jì)算及運(yùn)維開發(fā)學(xué)習(xí)，逐步成長為高級(jí)云計(jì)算及運(yùn)維開發(fā)工程師。

前言
課程設(shè)計(jì)說明
第1章　OpenStack體驗(yàn) 1
1.1　云計(jì)算介紹 2
1.1.1　紅帽O(jiān)penStack產(chǎn)品 2
1.1.2　安裝紅帽O(jiān)penStack環(huán)境 3
1.2　創(chuàng)建實(shí)例案例 7
1.2.1　準(zhǔn)備工作 8
1.2.2　在Horizon中啟動(dòng)實(shí)例 10
1.2.3　擴(kuò)展應(yīng)用 23
本章總結(jié) 26
本章作業(yè) 26
第2章　OpenStack搭建企業(yè)
私有云 27
2.1　環(huán)境準(zhǔn)備 28
2.2　基礎(chǔ)配置 32
2.2.1　安裝配置NTP服務(wù) 32
2.2.2　配置OpenStack yum庫 33
2.2.3　MySQL數(shù)據(jù)庫 34
2.2.4　NoSQL數(shù)據(jù)庫 37
2.2.5　安裝配置Messaging server-
RabbitMQ 37
2.2.6　Memcached 39
2.3　認(rèn)證服務(wù) 39
2.3.1　認(rèn)證服務(wù)概覽 39
2.3.2　安裝配置 40
2.3.3　創(chuàng)建服務(wù)實(shí)體和API端點(diǎn) 42
2.3.4　創(chuàng)建域、項(xiàng)目、用戶和角色 44
2.3.5　驗(yàn)證操作 47
2.3.6　創(chuàng)建OpenStack客戶端環(huán)境腳本 48
2.4　鏡像服務(wù) 49
2.4.1　鏡像服務(wù)概覽 49
2.4.2　安裝和配置 50
2.4.3　創(chuàng)建鏡像服務(wù)的 API 端點(diǎn) 51
2.4.4　安裝軟件包 52
2.4.5　驗(yàn)證操作 53
2.5　計(jì)算服務(wù) 55
2.5.1　計(jì)算服務(wù)概覽 55
2.5.2　安裝并配置控制節(jié)點(diǎn) 56
2.5.3　安裝和配置計(jì)算節(jié)點(diǎn) 60
2.5.4　驗(yàn)證操作 62
2.6　Networking 服務(wù) 63
2.6.1　網(wǎng)絡(luò)服務(wù)概覽 63
2.6.2　安裝并配置控制節(jié)點(diǎn) 64
2.6.3　安裝和配置計(jì)算節(jié)點(diǎn) 70
2.6.4　驗(yàn)證操作 72
2.7　Dashboard 74
2.8　啟動(dòng)一個(gè)實(shí)例 76
本章總結(jié) 83
第3章　云存儲(chǔ) 85
3.1　塊存儲(chǔ)與文件存儲(chǔ) 86
3.2　對(duì)象存儲(chǔ) 87
3.3　對(duì)象存儲(chǔ)Swift 88
3.3.1　Swift數(shù)據(jù)模型 88
3.3.2　Swift組件 89
3.3.3　Swift的數(shù)據(jù)一致性 91
3.3.4　Swift存儲(chǔ)策略 91
3.3.5　對(duì)象存儲(chǔ)Swift補(bǔ)充 92
3.4　塊存儲(chǔ)服務(wù)Cinder 94
3.4.1　塊存儲(chǔ)服務(wù)概覽 94
3.4.2　塊存儲(chǔ)服務(wù)組件 94
3.4.3　Cinder架構(gòu)解釋 95
3.4.4　Cinder支持存儲(chǔ)類型 96
本章總結(jié) 96
第4章　Fuel安裝OpenStack 97
4.1　Fuel概述 98
4.2　虛擬環(huán)境設(shè)置 100
4.3　部署OpenStack環(huán)境 105
本章總結(jié) 116
第5章　大數(shù)據(jù)Hadoop 117
5.1　什么是大數(shù)據(jù) 118
5.2　Hadoop體系結(jié)構(gòu) 119
5.3　安裝Hadoop運(yùn)行環(huán)境 121
5.3.1　在Linux中配置Hadoop運(yùn)行環(huán)境 121
5.3.2　Hadoop完全分布式安裝 124
5.3.3　運(yùn)行Hadoop的WordCount程序 130
5.4　HDFS體系結(jié)構(gòu) 132
5.4.1　基本概念 133
5.4.2　Master/Slave架構(gòu) 136
5.4.3　HDFS的Web界面 136
5.4.4　HDFS的命令行操作 138
5.5　MapReduce基礎(chǔ) 141
5.5.1　MapReduce概述 142
5.5.2　MapReduce架構(gòu)設(shè)計(jì) 142
5.5.3　MapReduce編程模型 143
5.6　下一代MapReduce框架
YARN 145
5.6.1　YARN架構(gòu) 145
5.6.2　YARN配置文件 146
5.6.3　YARN作業(yè)執(zhí)行流程 147
5.6.4　YARN優(yōu)勢(shì) 148
本章總結(jié) 148
本章作業(yè) 149
第6章　HBase數(shù)據(jù)庫 151
6.1　HBase基礎(chǔ) 152
6.1.1　HBase簡介 152
6.1.2　HBase體系結(jié)構(gòu) 153
6.1.3　HBase數(shù)據(jù)模型 155
6.1.4　HBase的安裝 158
6.2　HBase Shell操作 165
6.3　MapReduce與HBase 172
6.4　Hive和Spark 174
6.4.1　Hive 174
6.4.2　Spark 175
本章總結(jié) 176
本章作業(yè) 176
第7章　部署CDH環(huán)境 177
7.1　CDH概述 178
7.2　案例環(huán)境 178
7.2.1　準(zhǔn)備工作 179
7.2.2　安裝數(shù)據(jù)庫 182
7.2.3　安裝CDH 183
7.2.4　安裝配置CDH集群 185
7.2.5　配置Kafka 190
本章總結(jié) 192
第8章　云計(jì)算數(shù)據(jù)中心與亞馬遜
AWS 193
8.1　體系結(jié)構(gòu)簡介 194
8.2　云計(jì)算數(shù)據(jù)中心特點(diǎn) 195
8.3　網(wǎng)絡(luò)應(yīng)用架構(gòu) 196
8.4　能源利用 199
8.5　自動(dòng)化管理 201
8.6　容災(zāi)系統(tǒng) 201
8.6.1　容災(zāi)概述 202
8.6.2　容災(zāi)技術(shù) 202
8.7　亞馬遜AWS 203
本章總結(jié) 205

1. 云計(jì)算原理 [王鵬　編著]
2. 云計(jì)算部署與運(yùn)維項(xiàng)目化教程 [主編 陳宗仁 王玉賢 魏育華]
3. 云平臺(tái)通信技術(shù)應(yīng)用 [主編　王浩　王偉旗]
4. 云計(jì)算與網(wǎng)絡(luò)安全 [主編　肖睿　徐文義]
5. 云計(jì)算技術(shù)實(shí)訓(xùn)教程 [主編 周躍南 蔡學(xué)軍]
6. 走進(jìn)云計(jì)算：Windows Azure實(shí)戰(zhàn)手記 [朱明中（小朱） 著]