課程主題 |
主要內(nèi)容 |
案例和演示 |
Hadoop的來(lái)源和動(dòng)機(jī) |
傳統(tǒng)大規(guī)模系統(tǒng)存在的問(wèn)題
Hadoop概述
Hadoop分布式文件系統(tǒng)??????
MapReduce工作原理????????
Hadoop集群剖析?????????? ?
?Hadoop生態(tài)系統(tǒng)對(duì)一種新的解決方案的需求
Hadoop的行業(yè)應(yīng)用案例分析
Hadoop在云計(jì)算和大數(shù)據(jù)的位置和關(guān)系 |
數(shù)據(jù)開(kāi)放,數(shù)據(jù)云服務(wù)平臺(tái)(DAAS)時(shí)代
Hadoop平臺(tái)在數(shù)據(jù)云平臺(tái)(DAAS)上的天然優(yōu)勢(shì)
數(shù)據(jù)云平臺(tái)(DAAS?平臺(tái))組成部分
互聯(lián)網(wǎng)公共數(shù)據(jù)大云(DAAS)案例
Hadoop構(gòu)建構(gòu)建游戲云(Web Game Daas)平臺(tái) |
Hadoop生態(tài)系統(tǒng)介紹和演示 |
Hadoop HDFS?和?MapReduce
Hadoop數(shù)據(jù)庫(kù)之HBase
Hadoop數(shù)據(jù)倉(cāng)庫(kù)之Hive
Hadoop數(shù)據(jù)處理腳本Pig
Hadoop數(shù)據(jù)接口Sqoop和Flume，Scribe DataX
Hadoop工作流引擎?Oozie |
運(yùn)用Hadoop自下而上構(gòu)建大規(guī)模企業(yè)數(shù)據(jù)倉(cāng)庫(kù)
暴風(fēng)影音數(shù)據(jù)倉(cāng)庫(kù)實(shí)戰(zhàn)解析 |
Hadoop組件詳解 |
Hadoop HDFS?基本結(jié)構(gòu)
Hadoop HDFS?副本存放策略
Hadoop NameNode?詳解
Hadoop SecondaryNameNode?詳解
Hadoop DataNode?詳解
Hadoop JobTracker?詳解
Hadoop TaskTracker?詳解 |
Hadoop Mapper類(lèi)核心代碼
Hadoop Reduce類(lèi)核心代碼
Hadoop?核心代碼 |
Hadoop安裝和部署 |
Hadoop系統(tǒng)模塊組件概述
Hadoop試驗(yàn)集群的部署結(jié)構(gòu)
Hadoop?安裝依賴(lài)關(guān)系
Hadoop?生產(chǎn)環(huán)境的部署結(jié)構(gòu)
Hadoop集群部署
Hadoop?高可用配置方法
Hadoop?集群簡(jiǎn)單測(cè)試方法
Hadoop?集群異常Debug方法
? |
Hadoop安裝部署實(shí)驗(yàn)
Red hat Linux基礎(chǔ)環(huán)境搭建
Hadoop?單機(jī)系統(tǒng)版本安裝配置
Hadoop?集群系統(tǒng)版本安裝和啟動(dòng)配置
使用?Hadoop MapReduce Streaming快速測(cè)試系統(tǒng)
Hadoopcore-site，hdfs-site，mapred-site?配置詳解 |
Hadoop集群規(guī)劃 |
Hadoop?集群內(nèi)存要求
Hadoop集群磁盤(pán)分區(qū)
集群和網(wǎng)絡(luò)拓?fù)湟?/DIV>
集群軟件的端口配置 |
針對(duì)NameNode Jobtracker DataNode TaskTracker Hiveserver?等不同組件需求推薦服務(wù)器配置 |
MapReduce?算法原理 |
Hadoop MapReduce?算法的原理和優(yōu)化思想
靈活運(yùn)用MapReduce?實(shí)現(xiàn)算法 |
運(yùn)用MapReduce?構(gòu)建數(shù)據(jù)庫(kù)算法
Select Sort GrougBy Sum Count
Join?新進(jìn)流失算法
使用?Y-Smart?快速轉(zhuǎn)換SQL為MapReduce?代碼 |
編寫(xiě)MapReduce高級(jí)程序 |
使用?Hadoop MapReduce Streaming?編程
MapReduce流程??????????
剖析一個(gè)MapReduce程序
基本MapReduceAPI?概念??
驅(qū)動(dòng)代碼?Mapper、Reducer
Hadoop流
API?使用Eclipse進(jìn)行快速開(kāi)發(fā)???????????????
新MapReduce API
MapReduce的優(yōu)化
MapReduce的任務(wù)調(diào)度
MapReduce編程實(shí)戰(zhàn)
如何利用其他Hadoop相關(guān)技術(shù)，包括Apache Hive，?Apache Pig，Sqoop和Oozie等
滿(mǎn)足解決實(shí)際數(shù)據(jù)分析問(wèn)題的高級(jí)Hadoop API |
Hadoop Streaming?和?Java MapReduce Api?差異。
?MapReduce?實(shí)現(xiàn)數(shù)據(jù)庫(kù)功能
利用Combiners來(lái)減少中間數(shù)據(jù)
編寫(xiě)Partitioner來(lái)優(yōu)化負(fù)載平衡
直接訪問(wèn)Hadoop分布式文件系統(tǒng)（HDFS）
Hadoop的join操作
輔助排序在Reducer方的合并
定制Writables和WritableComparables
使用SequenceFiles和Avro文件保存二進(jìn)制數(shù)據(jù)
創(chuàng)建InputFormats OutputFormats
Hadoop的二次排序
Hadoop的海量日志分析 |
首頁(yè) 課程表 在線聊 報(bào)名 講師 品牌 QQ聊 活動(dòng) 就業(yè)