曙海教育集團
全國報名免費熱線:4008699035 微信:shuhaipeixun
或15921673576(微信同號) QQ:1299983702
首頁 課程表 在線聊 報名 講師 品牌 QQ聊 活動 就業
 
 
     班級規模及環境--熱線:4008699035 手機:15921673576( 微信同號)
         每期人數限3到5人。
     上課時間和地點
  上課地點:【上?!浚和瑵髮W(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山學院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
最近開課時間(周末班/連續班/晚班):2020年3月16日
     實驗設備
       ☆資深工程師授課
        
        ☆注重質量 ☆邊講邊練

        ☆合格學員免費推薦工作
        ★實驗設備請點擊這兒查看★
     質量保障
 

        1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
        2、培訓結束后,授課老師留給學員聯系方式,保障培訓效果,免費提供課后技術支持。
        3、培訓合格學員可享受免費推薦就業機會。

 
課程大綱
   
 

?

3課程大綱

Hadoop高階應用課程(81課時)

Hadoop 2.0(6課時)

Hadoop 2.0產生背景

Hadoop 2.0基本構成

HDFS 2.0

MapReduce 2.0

Hadoop 2.0安裝配置

集群測試

YARN資源管理系統(4課時)

YARN產生背景

YARN基本設計思想

YARN基本架構

YARN工作流程

YARN通信協議

YARN容錯

YARN資源調度機制

YARN支持的計算框架(Storm,Tez,Spark)(11課時)

以YARN為核心的生態系統

Storm基本概念

Storm流式計算框架

基于YARN的Storm架構

YARN-Storm部署

Storm On YARN服務

Apache Tez介紹

Tez特點

Tez數據處理引擎

DAGAppMaster實現

Tez優化機制

Tez應用場景

Tez部署

什么是Spark

Spark生態系統

Spark的核心--RDD和Lineage

RDD的存儲、容錯機制、內部設計及數據模型

Spark調度框架

Spark的分布式部署方式

基于Mesos的Spark模式

基于YARN的Spark模式

Spark的獨立模式部署

Spark的YARN模式部署

MapReduce多語言編程(5課時)

MapReduce編程接口

Java編程接口實例解析

Hadoop Streaming實現方式

Hadoop Streaming編程實戰(C++,PHP,PYTHON)

Hadoop Streaming原理剖析

Hadoop Pipes的編程實例

Hadoop Pipes的原理剖析

MapReduce高階實現(14課時)

復雜的MapReduce應用

K-means聚類、貝葉斯分類等

工作流編程實例及原理剖析

JobControl、ChainMapper/ChainReducer

Hadoop工作流引擎

常用MapReduce優化技巧

配置多個reducer

設置Stream的處理格式

控制分片的大小

避免分片

輸入格式:文本輸入、多種類型輸入

輸出控制:多個輸出、延遲輸出

實戰:數據分區

MapReduce高級特性

計數器、內置計數器

實例:用戶自定義計數器

MapReduce部分排序的實現

實例:MapReduce全排序

Terasort算法分析

實例:MapReduce實現二次排序

連接、Map端連接的實現

實例:Reduce端連接

連接類型、連接策略介紹

重分區連接框架的實現

復制連接框架的實現

實例:半連接

全局作業參數/數據文件傳遞

HBase編程實踐及案例分析(10課時)

HBase基礎精講

HBase Java編程實例

HBase多語言編程

Thrift安裝、服務配置

HBase C++編程實例

HBase Python編程實例

HBase MapReduce編程基礎

實戰:HBase MapReduce編程

Hbase案例:OpenTSDB的實現

基于HBase的爬蟲調度庫

基于HBase的爬蟲索引庫

銀行人民幣查詢系統

Sqoop(6課時)

Sqoop產生背景、基本

Sqoop1和Sqoop2架構及特點

Sqoop1安裝配置(版本1.4.4)

Sqoop導入介紹

實戰:從mysql導入數據到HDFS

實戰:從mysql導入數據到Hive

Sqoop導出介紹

實戰:將Hive數據導出到Mysql

Sqoop與Hbase結合

Sqoop作業操作

Sqoop作業安全配置

Sqoop2安裝配置(版本1.99.3)

Sqoop2使用綜合實戰

Flume日志收集系統(7課時)

Flume概念和特點

Flume OG架構、組成、特點、容錯機制設計

日志收集系統綜合比較

Flume NG架構、核心概念

Flume OG的安裝

Flume OG的配置(Web端、Flume shell)

Flume NG的安裝配置、測試

Flume NG模塊配置(Source、Channel、Sink)

Flume NG配置實戰分析

Avro數據序列化系統(1課時)

Avro介紹

Avro特性、主要作用

RPC使用Avro

Avro與其他序列化系統的區別

Mahout數據挖掘工具(10課時)

數據挖掘概念、系統組成

數據挖掘常用方法及算法(回歸分析、分類、聚類等)

數據挖掘分析工具

Mahout支持的算法

Mahout起源和特點

Mahout安裝、配置及測試

實戰:Mahout K-means聚類分析

Mahout實現Canopy算法

Mahout實現分類算法

實戰:Mahout邏輯回歸分類預測

實戰:Mahout樸素貝葉斯分類

推薦系統的概念及分類

協同過濾推薦算法概念、分類及應用

實戰:實現基于Mahout的電影推薦系統

Hadoop綜合實戰-文本挖掘項目(7課時)

文本挖掘的概念及應用場景

項目背景

項目流程

中文分詞技術

庖丁分詞器的使用

MapReduce并行分詞程序的設計與實現

Pig劃分數據集

Mahout構建樸素貝葉斯文本分類器

模型應用-計算用戶偏好類別

 

??????? Troubleshooting Java Applications
? ? ? ? ? ? ? ? Classpath Errors
? ? ? ? ? ? ? ? Class Loaders
? ? ? ? ? ? ? ? Common Java Errors
??????? Troubleshooting Servers
? ? ? ? ? ? ? ? Native Libraries
? ? ? ? ? ? ? ? Threading Architecture
? ? ? ? ? ? ? ? Work Managers
? ? ? ? ? ? ? ? Deadlocks
? ? ? ? ? ? ? ? Overload Protection
? ? ? ? ? ? ? ? Deployment Problems
??????? Troubleshooting JDBC
? ? ? ? ? ? ? ? Data Source Management
? ? ? ? ? ? ? ? Diagnostics
? ? ? ? ? ? ? ? Debug Flags
? ? ? ? ? ? ? ? Connectivity Problems
? ? ? ? ? ? ? ? Connection Leaks
? ? ? ? ? ? ? ? Database Availability
??????? Troubleshooting JMS
? ? ? ? ? ? ? ? Management
? ? ? ? ? ? ? ? MBean Hierarchy
? ? ? ? ? ? ? ? Message Logging
? ? ? ? ? ? ? ? Diagnostics
? ? ? ? ? ? ? ? Debug Flags
? ? ? ? ? ? ? ? Overload Protection
? ? ? ? ? ? ? ? Lost Messages
? ? ? ? ? ? ? ? Duplicate Messages
??????? Troubleshooting Security
? ? ? ? ? ? ? ? SSL Internals
? ? ? ? ? ? ? ? Keystore Management
? ? ? ? ? ? ? ? Debug Flags
? ? ? ? ? ? ? ? Common SSL Problems
? ? ? ? ? ? ? ? Certificate Validation
? ? ? ? ? ? ? ? Embedded LDAP
? ? ? ? ? ? ? ? Security Audit
? ? ? ? ? ? ? ? Common LDAP Problems
??????? Troubleshooting Node Manager
? ? ? ? ? ? ? ? Internals
? ? ? ? ? ? ? ? Security
? ? ? ? ? ? ? ? Common Issues
??????? Troubleshooting Clusters
? ? ? ? ? ? ? ? Plug-in Configuration
? ? ? ? ? ? ? ? OHS Overview
? ? ? ? ? ? ? ? Plug-in Connectivity
? ? ? ? ? ? ? ? Plug-in Diagnostics
? ? ? ? ? ? ? ? Unicast Communication
? ? ? ? ? ? ? ? Replication Debug Flags
? ? ? ? ? ? ? ? Typical Replication Issues
熱線:4008699035 手機:15921673576( 微信同號)
備案號:備案號:滬ICP備08026168號-1 .(2024年07月24日)......................
友情鏈接:Cadence培訓 ICEPAK培訓 EMC培訓 電磁兼容培訓 sas容培訓 羅克韋爾PLC培訓 歐姆龍PLC培訓 PLC培訓 三菱PLC培訓 西門子PLC培訓 dcs培訓 橫河dcs培訓 艾默生培訓 robot CAD培訓 eplan培訓 dcs培訓 電路板設計培訓 浙大dcs培訓 PCB設計培訓 adams培訓 fluent培訓系列課程 培訓機構課程短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班培訓 南京 NS3培訓 OpenGL培訓 FPGA培訓 PCIE培訓 MTK培訓 Cortex訓 Arduino培訓 單片機培訓 EMC培訓 信號完整性培訓 電源設計培訓 電機控制培訓 LabVIEW培訓 OPENCV培訓 集成電路培訓 UVM驗證培訓 VxWorks培訓 CST培訓 PLC培訓 Python培訓 ANSYS培訓 VB語言培訓 HFSS培訓 SAS培訓 Ansys培訓 短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班 端海 教育 企業 學院 培訓課程 系列班 長期課程列表實踐課程高級課程學校培訓機構周末班 短期培訓系列課程培訓機構 端海教育企業學院培訓課程 系列班
a日韩av网址