IC培訓
           
         
         
             班級規模及環境--熱線:4008699035 手機:15921673576/13918613812( 微信同號)
                 堅持小班授課,為保證培訓效果,增加互動環節,每期人數限3到5人。
             上課時間和地點
          上課地點:【上海】:同濟大學(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
        近開課時間(周末班/連續班/晚班):2025年3月24日........................(歡迎您垂詢,視教育質量為生命!)
             實驗設備
               ☆資深工程師授課
                
                ☆注重質量 ☆邊講邊練

                ☆合格學員免費推薦工作
                ★實驗設備請點擊這兒查看★
             質量保障
         

                1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
                2、課程完成后,授課老師留給學員手機和Email,保障培訓效果,免費提供半年的技術支持。
                3、培訓合格學員可享受免費推薦就業機會。

         
        課程大綱
           
         

        ?

        一、大數據集群搭建

        課程介紹

        課程環境搭建:CentOS 6.4集群搭建

        課程環境搭建:hadoop-2.5.0-cdh5.3.6集群搭建

        課程環境搭建:hive-0.13.1-cdh5.3.6安裝

        課程環境搭建:zookeeper-3.4.5-cdh5.3.6集群搭建

        課程環境搭建:kafka_2.9.2-0.8.1集群搭建

        課程環境搭建:flume-ng-1.5.0-cdh5.3.6安裝

        課程環境搭建:離線日志采集流程介紹

        課程環境搭建:實時數據采集流程介紹

        課程環境搭建:Spark 1.5.1客戶端安裝以及基于YARN的提交模式

        ?
        二、用戶訪問session分析:?
        用戶訪問session分析:模塊介紹
        用戶訪問session分析:基礎數據結構以及大數據平臺架構介紹
        用戶訪問session分析:需求分析
        用戶訪問session分析:技術方案設計
        用戶訪問session分析:數據表設計
        用戶訪問session分析:Eclipse工程搭建以及工具類說明
        用戶訪問session分析:開發配置管理組件
        用戶訪問session分析:JDBC原理介紹以及增刪改查示范
        -用戶訪問session分析:數據庫連接池原理
        用戶訪問session分析:單例設計模式
        用戶訪問session分析:內部類以及匿名內部類
        用戶訪問session分析:開發JDBC輔助組件(上)
        用戶訪問session分析:開發JDBC輔助組件(下)
        用戶訪問session分析:JavaBean概念講解
        用戶訪問session分析:DAO模式講解以及TaskDAO開發
        用戶訪問session分析:工廠模式講解以及DAOFactory開發
        -用戶訪問session分析:JSON數據格式講解以及fastjson介紹
        用戶訪問session分析:Spark上下文構建以及模擬數據生成
        用戶訪問session分析:按session粒度進行數據聚合
        -用戶訪問session分析:按篩選參數對session粒度聚合數據進行過濾
        -用戶訪問session分析:session聚合統計之自定義Accumulator
        用戶訪問session分析:session聚合統計之重構實現思路與重構session聚合
        用戶訪問session分析:session聚合統計之重構過濾進行統計
        用戶訪問session分析:session聚合統計之計算統計結果并寫入MySQL
        用戶訪問session分析:session聚合統計之本地測試
        用戶訪問session分析:session聚合統計之使用Scala實現自定義Accumulator
        用戶訪問session分析:session隨機抽取之實現思路分析
        用戶訪問session分析:session隨機抽取之計算每天每小時session數量
        用戶訪問session分析:session隨機抽取之按時間比例隨機抽取算法實現
        用戶訪問session分析:session隨機抽取之根據隨機索引進行抽取
        -用戶訪問session分析:session隨機抽取之獲取抽取session的明細數據
        -用戶訪問session分析:session隨機抽取之本地測試
        -用戶訪問session分析:top10熱門品類之需求回顧以及實現思路分析
        -用戶訪問session分析:top10熱門品類之獲取session訪問過的所有品類
        -用戶訪問session分析:top10熱門品類之計算各品類點擊、下單和支付的次數
        用戶訪問session分析:top10熱門品類之join品類與點擊下單支付次數
        用戶訪問session分析:top10熱門品類之自定義二次排序key
        用戶訪問session分析:top10熱門品類之進行二次排序
        用戶訪問session分析:top10熱門品類之獲取top10品類并寫入MySQL
        用戶訪問session分析:top10熱門品類之本地測試
        -用戶訪問session分析:top10熱門品類之使用Scala實現二次排序
        -用戶訪問session分析:top10活躍session之開發準備以及top10品類RDD生成
        用戶訪問session分析:top10活躍session之計算top10品類被各sessoin點擊的次數
        用戶訪問session分析:top10活躍session之分組取TopN算法獲取top10活躍session
        用戶訪問session分析:top10活躍session之本地測試以及階段總結
        ?
        三、企業級性能調優、troubleshooting經驗與數據傾斜解決方案:
        用戶訪問session分析:性能調優之在實際項目中分配更多資源
        -用戶訪問session分析:性能調優之在實際項目中調節并行度
        用戶訪問session分析:性能調優之在實際項目中重構RDD架構以及RDD持久化
        用戶訪問session分析:性能調優之在實際項目中廣播大變量
        用戶訪問session分析:性能調優之在實際項目中使用Kryo序列化
        用戶訪問session分析:性能調優之在實際項目中使用fastutil優化數據格式
        -用戶訪問session分析:性能調優之在實際項目中調節數據本地化等待時長
        用戶訪問session分析:JVM調優之原理概述以及降低cache操作的內存占比
        用戶訪問session分析:JVM調優之調節executor堆外內存與連接等待時長
        -用戶訪問session分析:Shuffle調優之原理概述
        用戶訪問session分析:Shuffle調優之合并map端輸出文件
        用戶訪問session分析:Shuffle調優之調節map端內存緩沖與reduce端內存占比
        用戶訪問session分析:Shuffle調優之HashShuffleManager與SortShuffleManager
        用戶訪問session分析:算子調優之MapPartitions提升Map類操作性能
        用戶訪問session分析:算子調優之filter過后使用coalesce減少分區數量
        用戶訪問session分析:算子調優之使用foreachPartition優化寫數據庫性能
        用戶訪問session分析:算子調優之使用repartition解決Spark SQL低并行度的性能問題
        用戶訪問session分析:算子調優之reduceByKey本地聚合介紹
        用戶訪問session分析:troubleshooting之控制shuffle reduce端緩沖大小以避免OOM
        用戶訪問session分析:troubleshooting之解決JVM GC導致的shuffle文件拉取失敗
        用戶訪問session分析:troubleshooting之解決YARN隊列資源不足導致的application直接失敗
        用戶訪問session分析:troubleshooting之解決各種序列化導致的報錯
        用戶訪問session分析:troubleshooting之解決算子函數返回NULL導致的問題
        用戶訪問session分析:troubleshooting之解決yarn-client模式導致的網卡流量激增問題
        用戶訪問session分析:troubleshooting之解決yarn-cluster模式的JVM棧內存溢出問題
        -用戶訪問session分析:troubleshooting之錯誤的持久化方式以及checkpoint的使用
        用戶訪問session分析:數據傾斜解決方案之原理以及現象分析
        -用戶訪問session分析:數據傾斜解決方案之聚合源數據以及過濾導致傾斜的key
        -用戶訪問session分析:數據傾斜解決方案之提高shuffle操作reduce并行度
        用戶訪問session分析:數據傾斜解決方案之使用隨機key實現雙重聚合
        用戶訪問session分析:數據傾斜解決方案之將reduce join轉換為map join
        用戶訪問session分析:數據傾斜解決方案之sample采樣傾斜key單獨進行join
        用戶訪問session分析:數據傾斜解決方案之使用隨機數以及擴容表進行join
        ?
        四、頁面單跳轉化率統計:
        頁面單跳轉化率:模塊介紹
        頁面單跳轉化率:需求分析、技術方案設計、數據表設計
        -頁面單跳轉化率:編寫基礎代碼
        頁面單跳轉化率:頁面切片生成以及頁面流匹配算法實現
        頁面單跳轉化率:計算頁面流起始頁面的pv
        -頁面單跳轉化率:計算頁面切片的轉化率
        頁面單跳轉化率:將頁面切片轉化率寫入MySQL
        頁面單跳轉化率:本地測試
        頁面單跳轉化率:生產環境測試
        用戶訪問session分析:生產環境測試
        ?
        五、各區域熱門商品統計:
        各區域熱門商品統計:模塊介紹
        -各區域熱門商品統計:需求分析、技術方案設計以及數據設計
        各區域熱門商品統計:查詢用戶指定日期范圍內的點擊行為數據
        各區域熱門商品統計:異構數據源之從MySQL中查詢城市數據
        各區域熱門商品統計:關聯城市信息以及RDD轉換為DataFrame后注冊臨時表
        各區域熱門商品統計:開發自定義UDAF聚合函數之group_concat_distinct()
        各區域熱門商品統計:查詢各區域各商品的點擊次數并拼接城市列表
        -各區域熱門商品統計:關聯商品信息并使用自定義get_json_object函數和內置if函數標記經營類型
        -各區域熱門商品統計:使用開窗函數統計各區域的top3熱門商品
        -各區域熱門商品統計:使用內置case when函數給各個區域打上級別標記
        -各區域熱門商品統計:將結果數據寫入MySQL中
        各區域熱門商品統計:Spark SQL數據傾斜解決方案
        -各區域熱門商品統計:生產環境測試
        ?
        六、廣告點擊流量實時統計:
        廣告點擊流量實時統計:需求分析、技術方案設計以及數據設計
        廣告點擊流量實時統計:為動態黑名單實時計算每天各用戶對各廣告的點擊次數
        廣告點擊流量實時統計:使用高性能方式將實時計算結果寫入MySQL中
        廣告點擊流量實時統計:過濾出每個batch中的黑名單用戶以生成動態黑名單
        廣告點擊流量實時統計:基于動態黑名單進行點擊行為過濾
        廣告點擊流量實時統計:計算每天各省各城市各廣告的點擊量
        廣告點擊流量實時統計:計算每天各省的top3熱門廣告
        廣告點擊流量實時統計:計算每天各廣告近1小時滑動窗口內的點擊趨勢
        -廣告點擊流量實時統計:實現實時計算程序的HA高可用性
        -廣告點擊流量實時統計:對實時計算程序進行性能調優
        -廣告點擊流量實時統計:生產環境測試
        曙海教育實驗設備
        android開發板
        linux_android開發板
        fpga圖像處理
        曙海培訓實驗設備
        fpga培訓班
         
        本課程部分實驗室實景
        曙海實驗室
        實驗室
        曙海培訓優勢
         
          合作伙伴與授權機構



        Altera全球合作培訓機構



        諾基亞Symbian公司授權培訓中心


        Atmel公司全球戰略合作伙伴


        微軟全球嵌入式培訓合作伙伴


        英國ARM公司授權培訓中心


        ARM工具關鍵合作單位
          我們培訓過的企業客戶評價:
            曙海的andriod 系統與應用培訓完全符合了我公司的要求,達到了我公司培訓的目的。 特別值得一提的是授課講師針對我們公司的開發的項目專門提供了一些很好程序的源代碼, 基本滿足了我們的項目要求。
        ——上海貝爾,李工
            曙海培訓DSP2000的老師,上課思路清晰,口齒清楚,由淺入深,重點突出,培訓效果是不錯的,
        達到了我們想要的效果,希望繼續合作下去。
        ——中國電子科技集團技術部主任 馬工
            曙海的FPGA 培訓很好地填補了高校FPGA培訓空白,不錯。總之,有利于學生的發展, 有利于教師的發展,有利于課程的發展,有利于社會的發展。
        ——上海電子,馮老師
            曙海給我們公司提供的Dsp6000培訓,符合我們項目的開發要求,解決了很多困惑我 們很久的問題,與曙海的合作非常愉快。
        ——公安部第三研究所,項目部負責人李先生
            MTK培訓-我在網上找了很久,就是找不到。在曙海居然有MTK驅動的培訓,老師經驗 很豐富,知識面很廣。下一個還想培訓IPHONE蘋果手機。跟他們合作很愉快,老師很有人情味,態度很和藹。
        ——臺灣雙揚科技,研發處經理,楊先生
            曙海對我們公司的iPhone培訓,實驗項目很多,確實學到了東西。受益無窮 啊!特別是對于那種正在開發項目的,確實是物超所值。
        ——臺灣歐澤科技,張工
            通過參加Symbian培訓,再做Symbian相關的項目感覺更加得心應手了,理 論加實踐的授課方式,很有針對性,非常的適合我們。學完之后,很輕松的就完成了我們的項目。
        ——IBM公司,沈經理
            有曙海這樣的DSP開發培訓單位,是教育行業的財富,聽了他們的課,茅塞頓開。
        ——上海醫療器械高等學校,羅老師
          我們新培訓過的企業客戶以及培訓的主要內容:
         

        一汽海馬汽車 DSP培訓
        蘇州金屬研究院 DSP培訓
        南京南瑞集團技術 FPGA培訓
        西安愛生技術集團 FPGA培訓,DSP培訓
        成都熊谷加世電氣 DSP培訓
        福斯賽諾分析儀器(蘇州) FPGA培訓
        南京國電工程 FPGA培訓
        北京環境特性研究所 達芬奇培訓
        中國科微系統與信息技術研究所 FPGA高級培訓
        重慶網視只能流技術開發 達芬奇培訓
        無錫力芯微電子股份 IC電磁兼容
        河北科研究所 FPGA培訓
        上海微小衛星工程中心 DSP培訓
        廣州航天航空 POWERPC培訓
        桂林航天工 DSP培訓
        江蘇五維電子科技 達芬奇培訓
        無錫步進電機自動控制技術 DSP培訓
        江門市安利電源工程 DSP培訓
        長江力偉股份 CADENCE 培訓
        愛普生科技(無錫 ) 數字模擬電路
        河南平高 電氣 DSP培訓
        中國航天員科研訓練中心 A/D仿真
        常州易控汽車電子 WINDOWS驅動培訓
        南通大學 DSP培訓
        上海集成電路研發中心 達芬奇培訓
        北京瑞志合眾科技 WINDOWS驅動培訓
        江蘇金智科技股份 FPGA高級培訓
        中國重工第710研究所 FPGA高級培訓
        蕪湖伯特利汽車安全系統 DSP培訓
        廈門中智能軟件技術 Android培訓
        上海科慢車輛部件系統EMC培訓
        中國電子科技集團第五十研究所,軟件無線電培訓
        蘇州浩克系統科技 FPGA培訓
        上海申達自動防范系統 FPGA培訓
        四川長虹佳華信息 MTK培訓
        公安部第三研究所--FPGA初中高技術開發培訓以及DSP達芬奇芯片視頻、圖像處理技術培訓
        上海電子信息職業技術--FPGA高級開發技術培訓
        上海點逸網絡科技有限公司--3G手機ANDROID應用和系統開發技術培訓
        格科微電子有限公司--MTK應用(MMI)和驅動開發技術培訓
        南昌航空大學--fpga 高級開發技術培訓
        IBM 公司--3G手機ANDROID系統和應用技術開發培訓
        上海貝爾--3G手機ANDROID系統和應用技術開發培訓
        中國雙飛--Vxworks 應用和BSP開發技術培訓

         

        上海水務建設工程有限公司--Alter/Xilinx FPGA應用開發技術培訓
        恩法半導體科技--Allegro Candence PCB 仿真和信號完整性技術培訓
        中國計量--3G手機ANDROID應用和系統開發技術培訓
        冠捷科技--FPGA芯片設計技術培訓
        芬尼克茲節能設備--FPGA高級技術開發培訓
        川奇光電--3G手機ANDROID系統和應用技術開發培訓
        東華大學--Dsp6000系統開發技術培訓
        上海理工大學--FPGA高級開發技術培訓
        同濟大學--Dsp6000圖像/視頻處理技術培訓
        上海醫療器械高等專科學校--Dsp6000圖像/視頻處理技術培訓
        中航工業無線電電子研究所--Vxworks 應用和BSP開發技術培訓
        北京交通大學--Powerpc開發技術培訓
        浙江理工大學--Dsp6000圖像/視頻處理技術培訓
        臺灣雙陽科技股份有限公司--MTK應用(MMI)和驅動開發技術培訓
        滾石移動--MTK應用(MMI)和驅動開發技術培訓
        冠捷半導體--Linux系統開發技術培訓
        奧波--CortexM3+uC/OS開發技術培訓
        迅時通信--WinCE應用與驅動開發技術培訓
        海鷹醫療電子系統--DSP6000圖像處理技術培訓
        博耀科技--Linux系統開發技術培訓
        華路時代信息技術--VxWorks BSP開發技術培訓
        臺灣歐澤科技--iPhone開發技術培訓
        寶康電子--Allegro Candence PCB 仿真和信號完整性技術培訓
        上海天能電子有限公司--Allegro Candence PCB 仿真和信號完整性技術培訓
        上海亨通光電科技有限公司--andriod應用和系統移植技術培訓
        上海智搜文化傳播有限公司--Symbian開發培訓
        先先信息科技有限公司--brew 手機開發技術培訓
        鼎捷集團--MTK應用(MMI)和驅動開發技術培訓
        傲然科技--MTK應用(MMI)和驅動開發技術培訓
        中軟國際--Linux系統開發技術培訓
        龍旗控股集團--MTK應用(MMI)和驅動開發技術培訓
        研祥智能股份有限公司--MTK應用(MMI)和驅動開發技術培訓
        羅氏診斷--Linux應用開發技術培訓
        西東控制集團--DSP2000應用技術及DSP2000在光伏并網發電中的應用與開發
        科大訊飛--MTK應用(MMI)和驅動開發技術培訓
        東北農業大學--IPHONE 蘋果應用開發技術培訓
        中國電子科技集團--Dsp2000系統和應用開發技術培訓
        中國船舶重工集團--Dsp2000系統開發技術培訓
        晶方半導體--FPGA初中高技術培訓
        肯特智能儀器有限公司--FPGA初中高技術培訓
        哈爾濱大學--IPHONE 蘋果應用開發技術培訓
        昆明電器科學研究所--Dsp2000系統開發技術
        奇瑞汽車股份--單片機應用開發技術培訓


         

        ??????? Troubleshooting Java Applications
        ? ? ? ? ? ? ? ? Classpath Errors
        ? ? ? ? ? ? ? ? Class Loaders
        ? ? ? ? ? ? ? ? Common Java Errors
        ??????? Troubleshooting Servers
        ? ? ? ? ? ? ? ? Native Libraries
        ? ? ? ? ? ? ? ? Threading Architecture
        ? ? ? ? ? ? ? ? Work Managers
        ? ? ? ? ? ? ? ? Deadlocks
        ? ? ? ? ? ? ? ? Overload Protection
        ? ? ? ? ? ? ? ? Deployment Problems
        ??????? Troubleshooting JDBC
        ? ? ? ? ? ? ? ? Data Source Management
        ? ? ? ? ? ? ? ? Diagnostics
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Connectivity Problems
        ? ? ? ? ? ? ? ? Connection Leaks
        ? ? ? ? ? ? ? ? Database Availability
        ??????? Troubleshooting JMS
        ? ? ? ? ? ? ? ? Management
        ? ? ? ? ? ? ? ? MBean Hierarchy
        ? ? ? ? ? ? ? ? Message Logging
        ? ? ? ? ? ? ? ? Diagnostics
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Overload Protection
        ? ? ? ? ? ? ? ? Lost Messages
        ? ? ? ? ? ? ? ? Duplicate Messages
        ??????? Troubleshooting Security
        ? ? ? ? ? ? ? ? SSL Internals
        ? ? ? ? ? ? ? ? Keystore Management
        ? ? ? ? ? ? ? ? Debug Flags
        ? ? ? ? ? ? ? ? Common SSL Problems
        ? ? ? ? ? ? ? ? Certificate Validation
        ? ? ? ? ? ? ? ? Embedded LDAP
        ? ? ? ? ? ? ? ? Security Audit
        ? ? ? ? ? ? ? ? Common LDAP Problems
        ??????? Troubleshooting Node Manager
        ? ? ? ? ? ? ? ? Internals
        ? ? ? ? ? ? ? ? Security
        ? ? ? ? ? ? ? ? Common Issues
        ??????? Troubleshooting Clusters
        ? ? ? ? ? ? ? ? Plug-in Configuration
        ? ? ? ? ? ? ? ? OHS Overview
        ? ? ? ? ? ? ? ? Plug-in Connectivity
        ? ? ? ? ? ? ? ? Plug-in Diagnostics
        ? ? ? ? ? ? ? ? Unicast Communication
        ? ? ? ? ? ? ? ? Replication Debug Flags
        ? ? ? ? ? ? ? ? Typical Replication Issues
          曙海企業  
          備案號:滬ICP備08026168號 .(2014年7月11)...................
        友情鏈接:Cadence培訓 ICEPAK培訓 EMC培訓 電磁兼容培訓 sas容培訓 羅克韋爾PLC培訓 歐姆龍PLC培訓 PLC培訓 三菱PLC培訓 西門子PLC培訓 dcs培訓 橫河dcs培訓 艾默生培訓 robot CAD培訓 eplan培訓 dcs培訓 電路板設計培訓 浙大dcs培訓 PCB設計培訓 adams培訓 fluent培訓系列課程 培訓機構課程短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班培訓 南京 NS3培訓 OpenGL培訓 FPGA培訓 PCIE培訓 MTK培訓 Cortex訓 Arduino培訓 單片機培訓 EMC培訓 信號完整性培訓 電源設計培訓 電機控制培訓 LabVIEW培訓 OPENCV培訓 集成電路培訓 UVM驗證培訓 VxWorks培訓 CST培訓 PLC培訓 Python培訓 ANSYS培訓 VB語言培訓 HFSS培訓 SAS培訓 Ansys培訓 短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班 曙海 教育 企業 培訓課程 系列班 長期課程列表實踐課程高級課程學校培訓機構周末班 短期培訓系列課程培訓機構 曙海教育企業培訓課程 系列班
        在線客服