IC培訓
           
         
         
             班級規模及環境--熱線:4008699035 手機:15921673576/13918613812( 微信同號)
                 堅持小班授課,為保證培訓效果,增加互動環節,每期人數限3到5人。
             上課時間和地點
          上課地點:【上海】:同濟大學(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
        近開課時間(周末班/連續班/晚班):2025年3月24日........................(歡迎您垂詢,視教育質量為生命!)
             實驗設備
               ☆資深工程師授課
                
                ☆注重質量 ☆邊講邊練

                ☆合格學員免費推薦工作
                ★實驗設備請點擊這兒查看★
             質量保障
         

                1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
                2、課程完成后,授課老師留給學員手機和Email,保障培訓效果,免費提供半年的技術支持。
                3、培訓合格學員可享受免費推薦就業機會。

         
        課程大綱
           
         





        一、Hadoop2.0 動態增加節點

        怎樣添加節點

        添加新的服務器節點

        新節點操作系統配置

        新節點Hadoop配置

        調整新節點副本數

        ?

        二、Hadoop2.0 動態刪除節點

        怎樣刪除節點

        刪除Hadoop2.0集群節點

        測試監控刪除節點后的集群

        ?

        三、Hadoop2.0 HDFS HA部署

        HDFS HA的實現方式

        HDFS HA的實現步驟

        HA集群環境配置

        HA hdfs-site.xml參數配置

        HA其他參數配置

        JournalNode服務啟動及初始化

        HDFS HA服務啟動及手工切換

        基于ZK自動切換模式的實現

        HDFS HA中ZooKeeper部署

        配置HDFS HA自動切換模式

        HDFS HA自動故障切換測試

        ?

        四、Hadoop2.0 HDFS HA+Federation部署

        HDFS Federation的實現方式及規劃

        HDFS Federation的配置步驟

        配置HDFS Federation

        HDFS Federation服務啟動及測試

        HDFS HA+Federation實現及配置步驟

        HDFS HA+Federation的配置及服務啟動

        HDFS HA+Federation集群故障模擬測試

        ?

        五、Hadoop升級

        Hadoop內部升級的實現

        Hadoop1.0升級到2.0步驟

        HDFS升級配置操作

        執行HDFS升級并測試驗證

        MapReduce升級

        ?

        六、Hadoop2.0 YARN HA部署

        YARN HA的實現

        YARN HA的配置步驟及其相關參數

        Hadoop2.0 YARN HA配置操作

        YARN HA服務啟動及測試

        YARN HA測試及錯誤處理

        解決YARN HA啟動錯誤的問題

        HDFS+YARN HA故障模擬測試

        ?

        七、Hadoop安全管理深度剖析

        -Hadoop安全背景

        -Hadoop1.0安全問題及處理機制

        Kerberos基本概念及授權認證過程

        Kerberos在Hadoop中的應用

        Hadoop1.0安全機制的具體實現

        RPC安全之身份認證機制

        RPC安全之服務訪問控制機制

        HDFS安全策略

        Mapreduce安全策略

        Hadoop上層服務的安全策略

        Hadoop1.0安全機制的應用場景

        Hadoop2.0安全認證機制的實現

        Yarn中的各類令牌及其作用

        Hadoop2.0授權機制的實現

        ?

        八、搭建本地yum安裝CDH5 Hadoop集群

        為什么選擇CDH

        CDH的體系架構

        CDH的集群規劃

        CDH操作系統配置步驟

        CDH集群主機名及網絡配置

        操作系統yum源配置

        CDH5的yum源配置

        主機間信任關系的建立

        NTP時間同步服務配置

        JDK安裝

        安裝和配置HDFS步驟

        YUM安裝HDFS

        CDH集群環境變量配置

        CDH5 HDFS核心配置

        HDFS其他重要配置及服務啟動

        安裝和配置YARN的步驟

        YARN的安裝

        YARN的核心參數配置

        MapReduce相關參數配置

        服務啟動及驗證

        CDH5集群測試

        webHDFS的使用

        ?

        九、基于Kerberos認證的Hadoop安全管理

        Kerberos集群規劃及配置步驟

        Kerberos安裝配置

        Kerberos數據庫創建及服務啟動

        Kerberos的使用及測試

        Kerberos principal和keytab概念剖析

        HDFS上配置Kerberos步驟

        HDFS principal創建及生成keytab文件

        HDFS keytab文件部署

        HDFS安全參數配置

        Namenode服務的安全啟動

        Datanode服務的安全啟動

        HDFS安全使用測試

        YARN配置Kerberos步驟

        YARN principal創建及keytab文件生成部署

        YARN安全參數配置

        YARN服務安全啟動及測試

        自動化集群管理

        ?

        十、Zookeeper&HIVE&HBASE&LDAP實現Kerberos認證

        Zookeeper配置Kerberos步驟

        通過Yum安裝Zookeeper

        Zookeeper Server配置Kerberos

        Zookeeper Client配置kerberos

        HBase相關概念深度解析

        HBase配置Kerberos步驟

        通過Yum安裝HBase 01

        通過Yum安裝HBase 02

        為HBase配置Kerberos

        HBase啟動錯誤診斷及測試

        CDH Hive架構及配置Kerberos認證步驟

        安裝HIVE組件及配置PostgreSQL

        Hive的基礎配置

        為Hive配置Kerberos認證

        Hive shell及Beeline安全訪問測試

        hive與hbase集成原理

        hive-hbase集成安裝配置

        hive-hbase映射表創建

        LDAP基本概念

        LDAP模式設計

        LDAP集成Kerberos配置步驟

        LDAP安裝和基礎配置

        LDAP集成Kerberos及數據庫創建

        導入系統用戶到LDAP

        OpenLDAP客戶端配置和使用

        ?

        十一、Impala大數據分析引擎

        什么是Impala

        Impala架構和進程

        Impala安裝配置步驟

        Impala安裝部署

        Impala配置及服務啟動

        Impala配置Kerberos認證

        Impala啟停故障處理及測試

        Impala的使用

        Impala-shell基本功能的使用

        Impala連接查詢

        Impala聚合及子查詢

        Impala分區表的使用

        Impala的優化

        Impala收集統計信息及生成查詢計劃

        HDFS緩存池在Impala中的使用

        ?

        十二、Oozie&Hue的使用及安全認證管理

        什么是oozie

        Oozie安裝和配置步驟

        Oozie安裝和基本配置

        Oozie安全配置及服務啟動?

        Oozie啟動問題處理

        Oozie Mapreduce作業測試

        Oozie常用命令及工作流程定義

        Oozie MR&hive&sqoop動作節點配置

        Oozie pig&ssh&java&sw&shell動作節點配置

        Oozie Coordinator作業

        Coordinator動作和應用定義

        Oozie Bundle應用定義

        什么是Hue

        安裝配置Hue-HDFS&YARN

        Hue配置Hive、Kerberos、Imapala和Zookeeper等

        Hue安裝啟動問題處理

        Hue頁面初始化及查詢問題解決

        Hue控制臺的使用

        ?

        十三、Hadoop2.0授權及資源調度管理

        Hadoop授權管理基礎知識

        服務訪問授權

        服務級授權配置實例

        隊列訪問控制列表

        隊列訪問控制配置實例

        公平調度器配置步驟

        公平調度器配置實例

        公平調度器驗證

        容量調度器配置

        容量調度器配置

        容量調度配置測試驗證

        基于標簽的調度器

        ?

        十四、Hadoop壓縮

        hadoop壓縮概念及支持的格式

        hadoop常用幾種壓縮格式對比

        壓縮格式的選擇

        Snappy壓縮配置

        Snappy&Gzip壓縮測試

        Hadoop LZO壓縮安裝配置步驟

        cdh5 lzo壓縮安裝

        lzo安裝問題處理

        lzo壓縮配置及測試

        hive配置使用lzo壓縮

        Hive外部表使用lzo壓縮文件

        Hive使用lzo壓縮實例

        hbase壓縮配置

        hbase壓縮測試

        ?

        十五、Hadoop文件存儲格式

        大數據存儲需求及方式

        Hadoop常用文件格式

        HDFS塊內三種存儲方式實例

        RCFile的設計和實現

        ORCFile文件結構

        Hive文件存儲格式的選擇

        Hive不同文件格式數據加載測試

        多種文件格式查詢存儲效率測試

        RCFile性能測試

        ?

        十六、Hadoop調優

        調優思路

        應用程序優化

        Linux系統優化

        Hadoop實現機制調優

        機架感知策略實現

        Hadoop參數調優綜述及NameNode調優

        Datanode參數調優

        集中化緩存管理

        集中緩存架構和概念

        緩存管理及緩存池命令

        緩存操作實例

        緩存參數配置

        YARN調優概述

        Slave和Container資源分配

        配置資源分配和進程大小屬性

        YARN內存監控

        Reducer調度調優

        Mapreduce其他關鍵參數調優

        曙海教育實驗設備
        android開發板
        linux_android開發板
        fpga圖像處理
        曙海培訓實驗設備
        fpga培訓班
         
        本課程部分實驗室實景
        曙海實驗室
        實驗室
        曙海培訓優勢
         
          合作伙伴與授權機構



        Altera全球合作培訓機構



        諾基亞Symbian公司授權培訓中心


        Atmel公司全球戰略合作伙伴


        微軟全球嵌入式培訓合作伙伴


        英國ARM公司授權培訓中心


        ARM工具關鍵合作單位
          我們培訓過的企業客戶評價:
            曙海的andriod 系統與應用培訓完全符合了我公司的要求,達到了我公司培訓的目的。 特別值得一提的是授課講師針對我們公司的開發的項目專門提供了一些很好程序的源代碼, 基本滿足了我們的項目要求。
        ——上海貝爾,李工
            曙海培訓DSP2000的老師,上課思路清晰,口齒清楚,由淺入深,重點突出,培訓效果是不錯的,
        達到了我們想要的效果,希望繼續合作下去。
        ——中國電子科技集團技術部主任 馬工
            曙海的FPGA 培訓很好地填補了高校FPGA培訓空白,不錯。總之,有利于學生的發展, 有利于教師的發展,有利于課程的發展,有利于社會的發展。
        ——上海電子,馮老師
            曙海給我們公司提供的Dsp6000培訓,符合我們項目的開發要求,解決了很多困惑我 們很久的問題,與曙海的合作非常愉快。
        ——公安部第三研究所,項目部負責人李先生
            MTK培訓-我在網上找了很久,就是找不到。在曙海居然有MTK驅動的培訓,老師經驗 很豐富,知識面很廣。下一個還想培訓IPHONE蘋果手機。跟他們合作很愉快,老師很有人情味,態度很和藹。
        ——臺灣雙揚科技,研發處經理,楊先生
            曙海對我們公司的iPhone培訓,實驗項目很多,確實學到了東西。受益無窮 啊!特別是對于那種正在開發項目的,確實是物超所值。
        ——臺灣歐澤科技,張工
            通過參加Symbian培訓,再做Symbian相關的項目感覺更加得心應手了,理 論加實踐的授課方式,很有針對性,非常的適合我們。學完之后,很輕松的就完成了我們的項目。
        ——IBM公司,沈經理
            有曙海這樣的DSP開發培訓單位,是教育行業的財富,聽了他們的課,茅塞頓開。
        ——上海醫療器械高等學校,羅老師
          我們新培訓過的企業客戶以及培訓的主要內容:
         

        一汽海馬汽車 DSP培訓
        蘇州金屬研究院 DSP培訓
        南京南瑞集團技術 FPGA培訓
        西安愛生技術集團 FPGA培訓,DSP培訓
        成都熊谷加世電氣 DSP培訓
        福斯賽諾分析儀器(蘇州) FPGA培訓
        南京國電工程 FPGA培訓
        北京環境特性研究所 達芬奇培訓
        中國科微系統與信息技術研究所 FPGA高級培訓
        重慶網視只能流技術開發 達芬奇培訓
        無錫力芯微電子股份 IC電磁兼容
        河北科研究所 FPGA培訓
        上海微小衛星工程中心 DSP培訓
        廣州航天航空 POWERPC培訓
        桂林航天工 DSP培訓
        江蘇五維電子科技 達芬奇培訓
        無錫步進電機自動控制技術 DSP培訓
        江門市安利電源工程 DSP培訓
        長江力偉股份 CADENCE 培訓
        愛普生科技(無錫 ) 數字模擬電路
        河南平高 電氣 DSP培訓
        中國航天員科研訓練中心 A/D仿真
        常州易控汽車電子 WINDOWS驅動培訓
        南通大學 DSP培訓
        上海集成電路研發中心 達芬奇培訓
        北京瑞志合眾科技 WINDOWS驅動培訓
        江蘇金智科技股份 FPGA高級培訓
        中國重工第710研究所 FPGA高級培訓
        蕪湖伯特利汽車安全系統 DSP培訓
        廈門中智能軟件技術 Android培訓
        上海科慢車輛部件系統EMC培訓
        中國電子科技集團第五十研究所,軟件無線電培訓
        蘇州浩克系統科技 FPGA培訓
        上海申達自動防范系統 FPGA培訓
        四川長虹佳華信息 MTK培訓
        公安部第三研究所--FPGA初中高技術開發培訓以及DSP達芬奇芯片視頻、圖像處理技術培訓
        上海電子信息職業技術--FPGA高級開發技術培訓
        上海點逸網絡科技有限公司--3G手機ANDROID應用和系統開發技術培訓
        格科微電子有限公司--MTK應用(MMI)和驅動開發技術培訓
        南昌航空大學--fpga 高級開發技術培訓
        IBM 公司--3G手機ANDROID系統和應用技術開發培訓
        上海貝爾--3G手機ANDROID系統和應用技術開發培訓
        中國雙飛--Vxworks 應用和BSP開發技術培訓

         

        上海水務建設工程有限公司--Alter/Xilinx FPGA應用開發技術培訓
        恩法半導體科技--Allegro Candence PCB 仿真和信號完整性技術培訓
        中國計量--3G手機ANDROID應用和系統開發技術培訓
        冠捷科技--FPGA芯片設計技術培訓
        芬尼克茲節能設備--FPGA高級技術開發培訓
        川奇光電--3G手機ANDROID系統和應用技術開發培訓
        東華大學--Dsp6000系統開發技術培訓
        上海理工大學--FPGA高級開發技術培訓
        同濟大學--Dsp6000圖像/視頻處理技術培訓
        上海醫療器械高等專科學校--Dsp6000圖像/視頻處理技術培訓
        中航工業無線電電子研究所--Vxworks 應用和BSP開發技術培訓
        北京交通大學--Powerpc開發技術培訓
        浙江理工大學--Dsp6000圖像/視頻處理技術培訓
        臺灣雙陽科技股份有限公司--MTK應用(MMI)和驅動開發技術培訓
        滾石移動--MTK應用(MMI)和驅動開發技術培訓
        冠捷半導體--Linux系統開發技術培訓
        奧波--CortexM3+uC/OS開發技術培訓
        迅時通信--WinCE應用與驅動開發技術培訓
        海鷹醫療電子系統--DSP6000圖像處理技術培訓
        博耀科技--Linux系統開發技術培訓
        華路時代信息技術--VxWorks BSP開發技術培訓
        臺灣歐澤科技--iPhone開發技術培訓
        寶康電子--Allegro Candence PCB 仿真和信號完整性技術培訓
        上海天能電子有限公司--Allegro Candence PCB 仿真和信號完整性技術培訓
        上海亨通光電科技有限公司--andriod應用和系統移植技術培訓
        上海智搜文化傳播有限公司--Symbian開發培訓
        先先信息科技有限公司--brew 手機開發技術培訓
        鼎捷集團--MTK應用(MMI)和驅動開發技術培訓
        傲然科技--MTK應用(MMI)和驅動開發技術培訓
        中軟國際--Linux系統開發技術培訓
        龍旗控股集團--MTK應用(MMI)和驅動開發技術培訓
        研祥智能股份有限公司--MTK應用(MMI)和驅動開發技術培訓
        羅氏診斷--Linux應用開發技術培訓
        西東控制集團--DSP2000應用技術及DSP2000在光伏并網發電中的應用與開發
        科大訊飛--MTK應用(MMI)和驅動開發技術培訓
        東北農業大學--IPHONE 蘋果應用開發技術培訓
        中國電子科技集團--Dsp2000系統和應用開發技術培訓
        中國船舶重工集團--Dsp2000系統開發技術培訓
        晶方半導體--FPGA初中高技術培訓
        肯特智能儀器有限公司--FPGA初中高技術培訓
        哈爾濱大學--IPHONE 蘋果應用開發技術培訓
        昆明電器科學研究所--Dsp2000系統開發技術
        奇瑞汽車股份--單片機應用開發技術培訓


         

        ??????? Troubleshooting Java Applications
        ? ? ? ? ? ? ? ? Classpath Errors
        ? ? ? ? ? ? ? ? Class Loaders
        ? ? ? ? ? ? ? ? Common Java Errors
        ??????? Troubleshooting Servers
        ? ? ? ? ? ? ? ? Native Libraries
        ? ? ? ? ? ? ? ? Threading Architecture
        ? ? ? ? ? ? ? ? Work Managers
        ? ? ? ? ? ? ? ? Deadlocks
        ? ? ? ? ? ? ? ? Overload Protection
        ? ? ? ? ? ? ? ? Deployment Problems
        ??????? Troubleshooting JDBC
        ? ? ? ? ? ? ? ? Data Source Management
        ? ? ? ? ? ? ? ? Diagnostics
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Connectivity Problems
        ? ? ? ? ? ? ? ? Connection Leaks
        ? ? ? ? ? ? ? ? Database Availability
        ??????? Troubleshooting JMS
        ? ? ? ? ? ? ? ? Management
        ? ? ? ? ? ? ? ? MBean Hierarchy
        ? ? ? ? ? ? ? ? Message Logging
        ? ? ? ? ? ? ? ? Diagnostics
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Overload Protection
        ? ? ? ? ? ? ? ? Lost Messages
        ? ? ? ? ? ? ? ? Duplicate Messages
        ??????? Troubleshooting Security
        ? ? ? ? ? ? ? ? SSL Internals
        ? ? ? ? ? ? ? ? Keystore Management
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Common SSL Problems
        ? ? ? ? ? ? ? ? Certificate Validation
        ? ? ? ? ? ? ? ? Embedded LDAP
        ? ? ? ? ? ? ? ? Security Audit
        ? ? ? ? ? ? ? ? Common LDAP Problems
        ??????? Troubleshooting Node Manager
        ? ? ? ? ? ? ? ? Internals
        ? ? ? ? ? ? ? ? Security
        ? ? ? ? ? ? ? ? Common Issues
        ??????? Troubleshooting Clusters
        ? ? ? ? ? ? ? ? Plug-in Configuration
        ? ? ? ? ? ? ? ? OHS Overview
        ? ? ? ? ? ? ? ? Plug-in Connectivity
        ? ? ? ? ? ? ? ? Plug-in Diagnostics
        ? ? ? ? ? ? ? ? Unicast Communication
        ? ? ? ? ? ? ? ? Replication Debug Flags
        ? ? ? ? ? ? ? ? Typical Replication Issues
          曙海企業  
          備案號:滬ICP備08026168號 .(2014年7月11)...................
        友情鏈接:Cadence培訓 ICEPAK培訓 EMC培訓 電磁兼容培訓 sas容培訓 羅克韋爾PLC培訓 歐姆龍PLC培訓 PLC培訓 三菱PLC培訓 西門子PLC培訓 dcs培訓 橫河dcs培訓 艾默生培訓 robot CAD培訓 eplan培訓 dcs培訓 電路板設計培訓 浙大dcs培訓 PCB設計培訓 adams培訓 fluent培訓系列課程 培訓機構課程短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班培訓 南京 NS3培訓 OpenGL培訓 FPGA培訓 PCIE培訓 MTK培訓 Cortex訓 Arduino培訓 單片機培訓 EMC培訓 信號完整性培訓 電源設計培訓 電機控制培訓 LabVIEW培訓 OPENCV培訓 集成電路培訓 UVM驗證培訓 VxWorks培訓 CST培訓 PLC培訓 Python培訓 ANSYS培訓 VB語言培訓 HFSS培訓 SAS培訓 Ansys培訓 短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班 曙海 教育 企業 培訓課程 系列班 長期課程列表實踐課程高級課程學校培訓機構周末班 短期培訓系列課程培訓機構 曙海教育企業培訓課程 系列班
        在線客服