中國培訓(xùn)易(m.aokangtiyu.cn)
綜合管理公開課
北京 2015年2月7日至2月12日 | 北京 2014年12月25日至12月30日 |
深圳 2014年11月25日至11月30日 |
內(nèi)容提示
本課程以大數(shù)據(jù)架構(gòu)與案例為驅(qū)動,采用一個完整地案例貫穿整個課程,讓學(xué)員體驗大數(shù)據(jù)架構(gòu)的企業(yè)價值。在課程中學(xué)員將被賦予企業(yè)架構(gòu)師角色,通過剖析企業(yè)對大數(shù)據(jù)的主要需求,使學(xué)員感悟大數(shù)據(jù)架構(gòu)設(shè)計的過程與價值。
培訓(xùn)目標(biāo)
全面掌握Hadoop的架構(gòu)原理和使用場景;
全程項目實戰(zhàn)訓(xùn)練;
徹底掌握使用Hadoop進行MapReduce程序開發(fā);
熟悉分布式計算領(lǐng)域的常用算法;
掌握Hive、HBase使用與優(yōu)化技巧。
了解云計算的發(fā)展歷史
掌握云計算的實踐應(yīng)用
學(xué)習(xí)云計算的核心技術(shù)
通曉云計算的商業(yè)價值。
第一專題:大數(shù)據(jù)分析與Hadoop開發(fā)
第1個主題:Hadoop的來源和動機
1.傳統(tǒng)大規(guī)模系統(tǒng)存在的問題
2.對一種新的解決方案的需求
3.Hadoop應(yīng)用案例解析
4.Hadoop 版本介紹
5.Hadoop與傳統(tǒng)分布式環(huán)境的區(qū)別
第2個主題:Hadoop安裝和部署準(zhǔn)備
1. Hadoop系統(tǒng)模塊組件概述
2. Hadoop試驗集群的部署結(jié)構(gòu)
3. Hadoop 安裝依賴關(guān)系
4. Hadoop 生產(chǎn)環(huán)境的部署結(jié)構(gòu)
第3個主題:Hadoop集群安裝和部署
第4個主題:Hadoop組件詳解
1. Hadoop HDFS 基本結(jié)構(gòu)
2. Hadoop HDFS 副本存放策略
3. Hadoop NameNode 詳解
4. Hadoop SecondaryNameNode 詳解
5. Hadoop DataNode 詳解
6. Hadoop JobTracker 詳解
5.Mapper
6.Reducer
7.API 使用Eclipse進行快速開發(fā)
8.新MapReduce API
第4個主題:Hadoop 核心代碼剖析
1. Hadoop Mapper 類核心代碼剖析
2. Hadoop Reducer 類核心代碼剖析
第5個主題:HDFS分布式文件系統(tǒng)編程
1. Hadoop HDFS 剖析
2. Hadoop NameNode 剖析
3. Hadoop DataNode 剖析
4. hadoop I/O 操作
5. 使用Hadoop HDFS API對HDFS編程
第5個主題
第1個主題:Hadoop MapReduce
1. Hadoop JobTracker 剖析
2.Hadoop TaskTracker 剖析
3.Hadoop 任務(wù)提交流程剖析
第2個主題: Hadoop MapReduce Streaming編程
1. Hadoop Streaming 和 Java MapReduce Api 差異
2. 使用 MapReduce 實現(xiàn)數(shù)據(jù)庫功能
第3個主題:MapReduce分布式程序
1. MapReduce流程
2.剖析一個MapReduce程序
3.基本MapReduceAPI 概念
4.驅(qū)動代碼
第4個主題:Hadoop Mapreduce高級編程
1.ToolRunner介紹
2.使用MRUnit進行測試
3.利用Combiners來減少中間數(shù)據(jù)
4.使用Configure和Close方法來進行Map/Reduce設(shè)置和關(guān)閉
5.編寫Partitioner來優(yōu)化負(fù)載平衡
6.直接訪問Hadoop分布式文件系統(tǒng)(HDFS)
7.使用分布式緩存(Distributed Cache)
第5個主題:MapReduce的優(yōu)化
1. map優(yōu)化
2. reduce優(yōu)化
3. 小文件優(yōu)化
第6個主題:MapReduce的任務(wù)調(diào)度
1. Queue調(diào)度的使用
2. 公平調(diào)度的使用
3. 能力調(diào)度的使用
第7個主題Hadoop 生態(tài)系統(tǒng)介紹
分布式管理組件-Zookeeper
分布式數(shù)據(jù)倉庫-Hive
分布式數(shù)據(jù)庫-HBase
數(shù)據(jù)導(dǎo)入導(dǎo)出-Sqoop
工作流管理- Ozzie
Hadoop數(shù)據(jù)倉庫-Hive
Hive基礎(chǔ)
Hive的作用和原理說明
Hadoop倉庫和傳統(tǒng)數(shù)據(jù)倉庫的協(xié)作關(guān)系;Hive與傳統(tǒng)數(shù)據(jù)庫的對接使用
Hadoop/Hive倉庫數(shù)據(jù)數(shù)據(jù)流
Hadoop數(shù)據(jù)倉庫-Hive
Hive Cli 的基本用法
HQL基本語法
自行編寫數(shù)據(jù)庫與Hadoop相互ETL工具的思路
Hadoop 分布式數(shù)據(jù)倉庫-HBase
Hbase概念與架構(gòu)
hbase核心知識點
hbase安裝、部署
HBase配置優(yōu)化綜述
表設(shè)計優(yōu)化相關(guān)參數(shù)
監(jiān)控工具使用方法及注意事項
常見異,F(xiàn)象級處理方法
(第二專題:大數(shù)據(jù)與云計算架構(gòu))
云計算概述 云的理想
云的挑戰(zhàn)
發(fā)展的趨勢
云是什么
不同工作負(fù)載適用不同的云
選擇合適的云平臺
幾個云應(yīng)用案例
我們身邊的云
云架構(gòu) 云多層架構(gòu)視圖
IaaS、PaaS與SaaS的定位與異同
云平臺的發(fā)展現(xiàn)狀
云數(shù)據(jù)中心技術(shù)架構(gòu)
IAAS云層的原理與應(yīng)用 IaaS的基礎(chǔ):虛擬化
虛擬化相關(guān)技術(shù)
Power云部署方案介紹
VMWare云部署方案介紹
OpenStack云部署方案介紹
SONAS云存儲方案介紹
應(yīng)用實例
第
五
天
PaaS云層的原理與應(yīng)用 PaaS的架構(gòu)原理
基于WebSphere的PaaS設(shè)計實踐
SaaS云層的原理與應(yīng)用 SaaS的架構(gòu)原理
一個公有云SaaS的設(shè)計實踐
云計算的性能管理與容量規(guī)劃 什么是性能容量管理
性能容量管理參考案例
壓力測試基本理論
系統(tǒng)性能設(shè)計與調(diào)優(yōu)
第
六
天 大數(shù)據(jù)云的原理與架構(gòu) 存儲子系統(tǒng)
傳統(tǒng)文件系統(tǒng)
松耦合網(wǎng)絡(luò)文件系統(tǒng)
共享存儲文件系統(tǒng)
基于對象的存儲子系統(tǒng)
大數(shù)據(jù)存儲子系統(tǒng)
Google GFS
Facebook Haystack
Amazon Dynamo
Yahoo PNUTS
Google BigTable
云存儲服務(wù)
Amazon Simple Storage Service
Google Storage for Developers
證書可作為專業(yè)技術(shù)人員職業(yè)能力考核的證明,以及專業(yè)技術(shù)人員崗位聘用、任職、定級和晉升職務(wù)的重要依據(jù)。
備 注
課程名稱:大數(shù)據(jù)分析(Hadoop)與云計算實踐培訓(xùn)班
咨詢電話:020-29042042 QQ: 59870764 |
報 名 回 執(zhí) 表
為確保您的報名名額和及時參加,請?zhí)崆皩⒋耍▓竺恚?/font>E-mail至674837974@QQ.com;721560397@QQ.COM(符小姐、黃小姐)我們將有專人與您聯(lián)系確認(rèn),并于開課前發(fā)出《培訓(xùn)報名確認(rèn)函》。培訓(xùn)時間、地點、住宿等詳細(xì)信息請以《培訓(xùn)報名確認(rèn)函》書面通知為準(zhǔn),敬請留意。謝謝!
聯(lián)系人:符小姐 電話:18588851172 QQ:674837974 |
網(wǎng)址:m.aokangtiyu.cn(中國培訓(xùn)易)
課程名稱:大數(shù)據(jù)分析(Hadoop)與云計算實踐培訓(xùn)班 時間地區(qū):____月____日_____市 | |||||
公司全稱: | |||||
聯(lián)系人 | | 部門 | | 公司網(wǎng)址 | |
聯(lián)系電話 | | 傳真 | | 聯(lián)系郵箱 | |
公司地址 | | 郵編 | | ||
參會人數(shù): 名 | |||||
參會人員資料 | |||||
姓名 | 職務(wù) | 電話 | 手機 | E-mail | |
| | | | | |
| | | | | |
| | | | | |
付款方式: □ 轉(zhuǎn)帳 □ 現(xiàn)金 (請選擇 在□打√) 注:部分地區(qū)不可現(xiàn)金
開戶人: 廣州必學(xué)企業(yè)管理咨詢有限公司 開戶行: 中國農(nóng)業(yè)銀行廣州天銀大廈支行 帳 號: 4405 8501 0400 08276 | |||||
課程金額:__________ | |||||
住宿要求(費用自理,開課前三天預(yù)訂) | |||||
是否需要會務(wù)組協(xié)助安排住宿: □是 □否 入住天數(shù)( )天 入住時間 2025 年 月 日 □標(biāo)準(zhǔn)雙人間( )間 □標(biāo)準(zhǔn)單人間( )間 | |||||
發(fā)票信息: 一、增值稅普通發(fā)票(數(shù)電票): 公司名稱(發(fā)票抬頭): 納稅人識別號: 發(fā)票內(nèi)容:□1、*現(xiàn)代服務(wù)*培訓(xùn)費 □2、*現(xiàn)代服務(wù)*咨詢服務(wù)費 □3、*現(xiàn)代服務(wù)*咨詢費 □4、*現(xiàn)代服務(wù)*培訓(xùn)咨詢服務(wù)費 二、增值稅專用發(fā)票(數(shù)電票): 公司名稱: 納稅人識別號: 發(fā)票內(nèi)容:□1、*現(xiàn)代服務(wù)*培訓(xùn)費 |