我要預訂

咨詢電話：027-5111 9925 , 027-5111 9926手機：18971071887郵箱：Service@mingketang.com

課程介紹

Hadoop實現了一個分布式文件系統（Hadoop Distributed File System），簡稱HDFS。HDFS有高容錯性的特點，并且設計用來部署在低廉的（low-cost）硬件上；而且它提供高傳輸率（high throughput）來訪問應用程序的數據，適合那些有著超大數據集（large data set）的應用程序。

課程目標

掌握大數據方法體系

掌握Hadoop原理技術

熟悉各項大數據處理手段和工具的使用。

培訓對象

全省互聯網分析人員

課程內容

第1天

主題Hadoop入門，了解什么是hadoop

1、Hadoop產生背景

2、Hadoop在大數據、云計算中的位置和關系

3、國內外Hadoop應用案例介紹

4、國內Hadoop的課程大綱介紹

5、Hadoop生態圈以及各組成部分的簡介

6、Hadoop核心MapReduce

例子說明

主題分布式文件系統HDFS

1、分布式文件系統DFS簡介

2、HDFS的系統組成介紹

3、HDFS的組成部分詳解

4、副本存放策略及路由規則

5、命令行接口

6、Java接口

7、客戶端與HDFS的數據流講解

8、HDFS的可用性（HA）

第2天

主題初級MapReduce

1、如何理解map、reduce計算模型

2、剖析偽分布式下MapReduce作業的執行過程

3、序列化

4、MapReduce的類型與格式

5、MapReduce開發環境搭建

6、MapReduce應用開發

7、更多示例講解，熟悉MapReduce算法原理

主題高級MapReduce

1、使用壓縮分隔減少輸入規模

2、利用Combiner減少中間數據

3、編寫Partitioner優化負載均衡

4、MapReduce優化

5、編程實戰

第3天

主題Hadoop集群與管理

1、Hadoop集群的搭建

2、Hadoop集群的監控

3、Hadoop集群的管理

4、集群下運行MapReduce程序

主題HBase基礎知識

1、HBase定義

2、HBase與RDBMS的對比

3、數據模型

4、系統架構

5、HBase上的MapReduce

6、表的設計

第4天

主題HBase集群及其管理

1、集群的搭建過程講解

2、集群的監控

3、集群的管理

主題Zookeeper

1、zookeeper的功能

2、zookeeper集群搭建

3、查看zookeeper中數據的存儲

第5天

主題Hive

1、數據倉庫基礎知識

2、Hive定義

3、Hive體系結構簡介

4、Hive集群

5、客戶端簡介

主題HiveQL

1、HiveQL定義

2、HiveQL與SQL的比較

3、數據類型

4、表與表分區概念

5、表的操作與CLI客戶端演示

6、數據導入與CLI客戶端演示

7、查詢數據與CLI客戶端演示

8、數據的連接與CLI客戶端演示

9、用戶自定義函數（UDF）的開發與演示

孫老師

講師資質

Oracle 數據庫 DBA認證

SAS 數據分析高級程序員認證

Hadoop大數據及數據分析講師

講師簡介

數據庫專家。 孫增輝老師多年從事數據庫的管理和教學工作。對oracle、sql server、mysql等關系型數據庫有豐富的教學經驗。對于hive、HBase這些非關系型NoSql數據庫也有相當成熟的教學實踐。

數據分析講師。孫增輝老師多年講授SAS數據分析軟件的應用與數據分析實踐。對SSPS、R、python等在數據分析方向的教學也有相當經驗。

Hadoop大數據、spark大數據分析講師。自2015年以來，孫增輝老師頻繁從事大數據方向的教學工作

Python+人工智能

Openstack云計算技術

Docker應用容器引擎

講師專長

孫增輝老師在數據庫、大數據、數據分析，python+人工智能，這條數據應用鏈路上，非常擅長。

講師IT從業經驗證明和項目經驗證明?從業經驗：

孫增輝老師從2008您進入數據庫行業之后，基本上一直從事數據相關工作。沒有脫離這個行業。

項目經驗 ：

1.項目名稱：華夏銀行oracle數據庫技術培訓

項目描述：孫增輝老師多次在華夏銀行進行oracle數據庫培訓。從2013年至2016年，幾乎每年都要進行兩三次數據庫培訓項目。

工作內容：為專業數據庫技術部門及非技術相關部門培訓數據庫技術

2.項目名稱：廣東移動 鼎湖培訓學院 大數據及數據分析

項目描述：長期多次在鼎湖培訓中心，多次講授大數據、大數據分析等相關課程。

工作內容：為專業技術部門及非技術相關部門培訓大數據、數據分析技術

3.項目名稱：建設銀行研發中心 大數據技術培訓（北京西城）

項目描述：為研發人員進行大數據技術培訓

某銀行數據庫遷移項目

因業務發展，舊有的系統無法承擔業務增長造成的壓力，需要將數據庫遷移到新的平臺。

作為項目負責人，編寫實施方案，溝通項目實踐窗口，安排方案測試并組織實施。

某銀行全國數據庫管理員培訓項目

為金融機構的oracle數據庫管理員提供培訓。

金融機構的技術人員一般有較好的技術基礎，這對講師的能力也是一種考驗。

作為主講講師，講授相關技術知識。

某銀行儲蓄數據庫性能調優項目

為機構的數據庫查詢性能提供優化。

由于新業務上線，系統老舊，以及管理能力瓶頸造成的性能無法滿足需要，對數據庫進行調優。通過優化代碼、重新組織存儲、合理建設索引等方法完成項目。

作為項目工程師，確認影響范圍，組織實施測試，實施調優。

某銀行數據庫開發項目

審核代碼、優化代碼在數據庫中的執行效率。維護測試數據庫、組織測試數據。

作為數據庫管理員，提供技術支持。

ORACLE OCP公開課項目

面向社會培訓的oracle認證課程。

主要是對oracle數據庫的初級學員進行培訓。課程內容涉及oracle數據庫的全方位知識，知識點全面，深度中等。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

ORACLE 數據庫災備方案 咨詢項目

對企業的oracle數據庫災備項目進行咨詢。

企業的oracle數據庫災備，是數據安全工作的重點，也是保障數據安全的重要手段。幫助企業完成災備方案并實施，是一項十分重要的工作。

作為咨詢顧問，進行售前技術交流、審核實施方案、安排組織方案測試。

ORACLE系統管理 系列培訓/咨詢項目

結合各行業企業客戶的項目和培訓需求，設計、開發相應的課程體系、定制課件、現場培訓、系統規劃、安裝、配置、性能優化、疑難解答等。

作為主講講師/咨詢顧問，提供技術支持，幫助界定項目范圍、時間長度安排。

某大學 計算機學院 oracle培訓項目

大學生的oracle數據庫培訓，與其他數據庫培訓有所不同。掌握課堂紀律，安排好課程的節奏反而是更重要的部分。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

廣東移動 SAS數據分析培訓項目

培訓項目內容深度要求并不嚴格，但是移動公司人員對知識的廣度要求加大。很多時候培訓組織的過程中，都要求按照學員的需求，隨時調整講授內容。這對講師的講授經驗、項目經驗、課程熟悉程度都會有較高要求。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

SAS程序開發

面向社會的SAS公開課。主要內容為數據處理與簡單建模。

很多數據分析課程，一開始就講授建模部分，但是數據的采集、整理、篩選、變換才是一個數據分析師的基本功。本課程的內容主要是數據處理。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

SAS數據分析

主要內容是使用描述統計、相關分析、主成分分析、聚類、回歸分析、邏輯回歸、方差分析、時間序列分析等方法對數據繼續分析處理。

作為主講講師，安排課程進度，組織教學實驗，維護學習氣氛。

工作內容：

組織培訓并安排考試考核

講師認證證書

講師授課經驗?廣東移動中高級數據庫培訓

招商銀行數據庫技術培訓

中國征信（北京）公司數據庫運維培訓

建設銀行大數據技術培訓

中石油化工oracle項目技術培訓

廣東移動數據分析培訓

上海CDA數據分析師項目培訓

泰安煙草數據分析培訓

我要預訂

咨詢電話：027-5111 9925 , 027-5111 9926手機：18971071887郵箱：Service@mingketang.com