我要預(yù)訂

咨詢電話：027-5111 9925 , 027-5111 9926手機：18971071887郵箱：Service@mingketang.com

課程介紹

Hadoop實現(xiàn)了一個分布式文件系統(tǒng)（Hadoop Distributed File System），簡稱HDFS。HDFS有高容錯性的特點，并且設(shè)計用來部署在低廉的（low-cost）硬件上；而且它提供高傳輸率（high throughput）來訪問應(yīng)用程序的數(shù)據(jù)，適合那些有著超大數(shù)據(jù)集（large data set）的應(yīng)用程序。

課程目標

掌握大數(shù)據(jù)方法體系

掌握Hadoop原理技術(shù)

熟悉各項大數(shù)據(jù)處理手段和工具的使用。

培訓對象

全省互聯(lián)網(wǎng)分析人員

課程內(nèi)容

第1天

主題Hadoop入門，了解什么是hadoop

1、Hadoop產(chǎn)生背景

2、Hadoop在大數(shù)據(jù)、云計算中的位置和關(guān)系

3、國內(nèi)外Hadoop應(yīng)用案例介紹

4、國內(nèi)Hadoop的課程大綱介紹

5、Hadoop生態(tài)圈以及各組成部分的簡介

6、Hadoop核心MapReduce

例子說明

主題分布式文件系統(tǒng)HDFS

1、分布式文件系統(tǒng)DFS簡介

2、HDFS的系統(tǒng)組成介紹

3、HDFS的組成部分詳解

4、副本存放策略及路由規(guī)則

5、命令行接口

6、Java接口

7、客戶端與HDFS的數(shù)據(jù)流講解

8、HDFS的可用性（HA）

第2天

主題初級MapReduce

1、如何理解map、reduce計算模型

2、剖析偽分布式下MapReduce作業(yè)的執(zhí)行過程

3、序列化

4、MapReduce的類型與格式

5、MapReduce開發(fā)環(huán)境搭建

6、MapReduce應(yīng)用開發(fā)

7、更多示例講解，熟悉MapReduce算法原理

主題高級MapReduce

1、使用壓縮分隔減少輸入規(guī)模

2、利用Combiner減少中間數(shù)據(jù)

3、編寫Partitioner優(yōu)化負載均衡

4、MapReduce優(yōu)化

5、編程實戰(zhàn)

第3天

主題Hadoop集群與管理

1、Hadoop集群的搭建

2、Hadoop集群的監(jiān)控

3、Hadoop集群的管理

4、集群下運行MapReduce程序

主題HBase基礎(chǔ)知識

1、HBase定義

2、HBase與RDBMS的對比

3、數(shù)據(jù)模型

4、系統(tǒng)架構(gòu)

5、HBase上的MapReduce

6、表的設(shè)計

第4天

主題HBase集群及其管理

1、集群的搭建過程講解

2、集群的監(jiān)控

3、集群的管理

主題Zookeeper

1、zookeeper的功能

2、zookeeper集群搭建

3、查看zookeeper中數(shù)據(jù)的存儲

第5天

主題Hive

1、數(shù)據(jù)倉庫基礎(chǔ)知識

2、Hive定義

3、Hive體系結(jié)構(gòu)簡介

4、Hive集群

5、客戶端簡介

主題HiveQL

1、HiveQL定義

2、HiveQL與SQL的比較

3、數(shù)據(jù)類型

4、表與表分區(qū)概念

5、表的操作與CLI客戶端演示

6、數(shù)據(jù)導(dǎo)入與CLI客戶端演示

7、查詢數(shù)據(jù)與CLI客戶端演示

8、數(shù)據(jù)的連接與CLI客戶端演示

9、用戶自定義函數(shù)（UDF）的開發(fā)與演示

孫老師

講師資質(zhì)

Oracle 數(shù)據(jù)庫 DBA認證

SAS 數(shù)據(jù)分析高級程序員認證

Hadoop大數(shù)據(jù)及數(shù)據(jù)分析講師

講師簡介

數(shù)據(jù)庫專家。 孫增輝老師多年從事數(shù)據(jù)庫的管理和教學工作。對oracle、sql server、mysql等關(guān)系型數(shù)據(jù)庫有豐富的教學經(jīng)驗。對于hive、HBase這些非關(guān)系型NoSql數(shù)據(jù)庫也有相當成熟的教學實踐。

數(shù)據(jù)分析講師。孫增輝老師多年講授SAS數(shù)據(jù)分析軟件的應(yīng)用與數(shù)據(jù)分析實踐。對SSPS、R、python等在數(shù)據(jù)分析方向的教學也有相當經(jīng)驗。

Hadoop大數(shù)據(jù)、spark大數(shù)據(jù)分析講師。自2015年以來，孫增輝老師頻繁從事大數(shù)據(jù)方向的教學工作

Python+人工智能

Openstack云計算技術(shù)

Docker應(yīng)用容器引擎

講師專長

孫增輝老師在數(shù)據(jù)庫、大數(shù)據(jù)、數(shù)據(jù)分析，python+人工智能，這條數(shù)據(jù)應(yīng)用鏈路上，非常擅長。

講師IT從業(yè)經(jīng)驗證明和項目經(jīng)驗證明?從業(yè)經(jīng)驗：

孫增輝老師從2008您進入數(shù)據(jù)庫行業(yè)之后，基本上一直從事數(shù)據(jù)相關(guān)工作。沒有脫離這個行業(yè)。

項目經(jīng)驗 ：

1.項目名稱：華夏銀行oracle數(shù)據(jù)庫技術(shù)培訓

項目描述：孫增輝老師多次在華夏銀行進行oracle數(shù)據(jù)庫培訓。從2013年至2016年，幾乎每年都要進行兩三次數(shù)據(jù)庫培訓項目。

工作內(nèi)容：為專業(yè)數(shù)據(jù)庫技術(shù)部門及非技術(shù)相關(guān)部門培訓數(shù)據(jù)庫技術(shù)

2.項目名稱：廣東移動 鼎湖培訓學院 大數(shù)據(jù)及數(shù)據(jù)分析

項目描述：長期多次在鼎湖培訓中心，多次講授大數(shù)據(jù)、大數(shù)據(jù)分析等相關(guān)課程。

工作內(nèi)容：為專業(yè)技術(shù)部門及非技術(shù)相關(guān)部門培訓大數(shù)據(jù)、數(shù)據(jù)分析技術(shù)

3.項目名稱：建設(shè)銀行研發(fā)中心 大數(shù)據(jù)技術(shù)培訓（北京西城）

項目描述：為研發(fā)人員進行大數(shù)據(jù)技術(shù)培訓

某銀行數(shù)據(jù)庫遷移項目

因業(yè)務(wù)發(fā)展，舊有的系統(tǒng)無法承擔業(yè)務(wù)增長造成的壓力，需要將數(shù)據(jù)庫遷移到新的平臺。

作為項目負責人，編寫實施方案，溝通項目實踐窗口，安排方案測試并組織實施。

某銀行全國數(shù)據(jù)庫管理員培訓項目

為金融機構(gòu)的oracle數(shù)據(jù)庫管理員提供培訓。

金融機構(gòu)的技術(shù)人員一般有較好的技術(shù)基礎(chǔ)，這對講師的能力也是一種考驗。

作為主講講師，講授相關(guān)技術(shù)知識。

某銀行儲蓄數(shù)據(jù)庫性能調(diào)優(yōu)項目

為機構(gòu)的數(shù)據(jù)庫查詢性能提供優(yōu)化。

由于新業(yè)務(wù)上線，系統(tǒng)老舊，以及管理能力瓶頸造成的性能無法滿足需要，對數(shù)據(jù)庫進行調(diào)優(yōu)。通過優(yōu)化代碼、重新組織存儲、合理建設(shè)索引等方法完成項目。

作為項目工程師，確認影響范圍，組織實施測試，實施調(diào)優(yōu)。

某銀行數(shù)據(jù)庫開發(fā)項目

審核代碼、優(yōu)化代碼在數(shù)據(jù)庫中的執(zhí)行效率。維護測試數(shù)據(jù)庫、組織測試數(shù)據(jù)。

作為數(shù)據(jù)庫管理員，提供技術(shù)支持。

ORACLE OCP公開課項目

面向社會培訓的oracle認證課程。

主要是對oracle數(shù)據(jù)庫的初級學員進行培訓。課程內(nèi)容涉及oracle數(shù)據(jù)庫的全方位知識，知識點全面，深度中等。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

ORACLE 數(shù)據(jù)庫災(zāi)備方案 咨詢項目

對企業(yè)的oracle數(shù)據(jù)庫災(zāi)備項目進行咨詢。

企業(yè)的oracle數(shù)據(jù)庫災(zāi)備，是數(shù)據(jù)安全工作的重點，也是保障數(shù)據(jù)安全的重要手段。幫助企業(yè)完成災(zāi)備方案并實施，是一項十分重要的工作。

作為咨詢顧問，進行售前技術(shù)交流、審核實施方案、安排組織方案測試。

ORACLE系統(tǒng)管理 系列培訓/咨詢項目

結(jié)合各行業(yè)企業(yè)客戶的項目和培訓需求，設(shè)計、開發(fā)相應(yīng)的課程體系、定制課件、現(xiàn)場培訓、系統(tǒng)規(guī)劃、安裝、配置、性能優(yōu)化、疑難解答等。

作為主講講師/咨詢顧問，提供技術(shù)支持，幫助界定項目范圍、時間長度安排。

某大學 計算機學院 oracle培訓項目

大學生的oracle數(shù)據(jù)庫培訓，與其他數(shù)據(jù)庫培訓有所不同。掌握課堂紀律，安排好課程的節(jié)奏反而是更重要的部分。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

廣東移動 SAS數(shù)據(jù)分析培訓項目

培訓項目內(nèi)容深度要求并不嚴格，但是移動公司人員對知識的廣度要求加大。很多時候培訓組織的過程中，都要求按照學員的需求，隨時調(diào)整講授內(nèi)容。這對講師的講授經(jīng)驗、項目經(jīng)驗、課程熟悉程度都會有較高要求。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

SAS程序開發(fā)

面向社會的SAS公開課。主要內(nèi)容為數(shù)據(jù)處理與簡單建模。

很多數(shù)據(jù)分析課程，一開始就講授建模部分，但是數(shù)據(jù)的采集、整理、篩選、變換才是一個數(shù)據(jù)分析師的基本功。本課程的內(nèi)容主要是數(shù)據(jù)處理。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

SAS數(shù)據(jù)分析

主要內(nèi)容是使用描述統(tǒng)計、相關(guān)分析、主成分分析、聚類、回歸分析、邏輯回歸、方差分析、時間序列分析等方法對數(shù)據(jù)繼續(xù)分析處理。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

工作內(nèi)容：

組織培訓并安排考試考核

講師認證證書

講師授課經(jīng)驗?廣東移動中高級數(shù)據(jù)庫培訓

招商銀行數(shù)據(jù)庫技術(shù)培訓

中國征信（北京）公司數(shù)據(jù)庫運維培訓

建設(shè)銀行大數(shù)據(jù)技術(shù)培訓

中石油化工oracle項目技術(shù)培訓

廣東移動數(shù)據(jù)分析培訓

上海CDA數(shù)據(jù)分析師項目培訓

泰安煙草數(shù)據(jù)分析培訓

我要預(yù)訂

咨詢電話：027-5111 9925 , 027-5111 9926手機：18971071887郵箱：Service@mingketang.com