“大數(shù)據(jù)分析高級工程師”培訓(xùn)

開課地點(diǎn)：	廣州
授課時間：	4天
授課顧問：	肖老師
開課時間：	2013-08-02
市場報價：	0
購買價格：	0
課程排期	開課城市 開課日期 授課周期   廣東廣州 2013-08-02 4天
審核時間：	我要報名2013-07-13 17:29:23

　　

課程背景：

隨著云時代的來臨，大數(shù)據(jù)技術(shù)將具有越來越重要的戰(zhàn)略意義。大數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域，逐漸成為重要的生產(chǎn)要素，人們對于海量數(shù)據(jù)的運(yùn)用將預(yù)示著新一輪生產(chǎn)率增長和消費(fèi)者盈余浪潮的到來。大數(shù)據(jù)分析技術(shù)將幫助企業(yè)用戶在合理時間內(nèi)攫取、管理、處理、整理海量數(shù)據(jù)，為企業(yè)經(jīng)營決策提供積極的幫助。大數(shù)據(jù)分析作為數(shù)據(jù)存儲和挖掘分析的前沿技術(shù)，廣泛應(yīng)用于物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)等戰(zhàn)略性新興產(chǎn)業(yè)。雖然大數(shù)據(jù)目前在國內(nèi)還處于初級階段，但是其商業(yè)價值已經(jīng)顯現(xiàn)出來。為加強(qiáng)大數(shù)據(jù)分析創(chuàng)新發(fā)展頂層設(shè)計和科學(xué)布局，推動相關(guān)人員更好理解和掌握大數(shù)據(jù)分析的關(guān)鍵技術(shù)原理、未來發(fā)展方向，為此培養(yǎng)大數(shù)據(jù)分析高級工程師。

培訓(xùn)對象：

IT公司數(shù)據(jù)分析師、數(shù)據(jù)中心架構(gòu)師、商業(yè)智能分析師、研發(fā)負(fù)責(zé)人、研發(fā)工程師、各地政府云計算、物聯(lián)網(wǎng)產(chǎn)業(yè)負(fù)責(zé)人，CIO、信息中心、技術(shù)總監(jiān)，云計算產(chǎn)業(yè)投資團(tuán)隊，云計算應(yīng)用開發(fā)商，云計算硬件設(shè)備、運(yùn)營服務(wù)提供商，高校、科研院所云計算項目負(fù)責(zé)人。

高級開發(fā)工程師、設(shè)計師、架構(gòu)師、系統(tǒng)管理員、開發(fā)經(jīng)理、測試經(jīng)理、產(chǎn)品經(jīng)理、項目經(jīng)理等。

培訓(xùn)證書：

工業(yè)和信息化部人才交流中心頒發(fā)的《工業(yè)和信息化領(lǐng)域急需緊缺人才》大數(shù)據(jù)分析高級工程師證書。證書可作為專業(yè)技術(shù)人員職業(yè)能力考核的證明，以及專業(yè)技術(shù)人員崗位聘用、任職、定級和晉升職務(wù)的重要依據(jù)。證書查詢：www.ncie.gov.cn

課程大綱：

第一天

一、大數(shù)據(jù)挖掘分析簡介

大數(shù)據(jù)發(fā)展歷程以及hadoop起源 大數(shù)據(jù)定義和傳統(tǒng)手段遇到的瓶頸 Hadoop怎么解決大數(shù)據(jù)問題的 Hadoop生態(tài)系統(tǒng)簡介 Hadoop體系下主要的分析手段 Hadoop中優(yōu)秀的軟件設(shè)計和體系架構(gòu)思想

二、大數(shù)據(jù)與Hadoop

偽分布式和完全分布式hadoop的安裝 Hadoop常用配置項解讀 Hadoop分布式文件系統(tǒng)原理 Hdfs常用命令演示 Mapreduce的工作原理 Hadoop自帶的example演示 手動編寫mapreduce示例程序 Hadoop常見故障分析與解決

第二天

一、大數(shù)據(jù)分析核心工具之mapreduce和pig

高級mapreduce開發(fā)演示：combiners、partitioner;MRUnit;分布式緩存;join;二次排序等) Mapreduce開發(fā)之分布式緩存 mapreduce模擬sql語言的各種操作

二、除mapreduce外的hadoop數(shù)據(jù)分析工具介紹

Pig之piglatin語言 Pig之udf擴(kuò)展 Pig案例

三、大數(shù)據(jù)分析核心工具之hive以及與現(xiàn)有工具流整合

Hive深入介紹 Hive之hql語言 Hive之udf擴(kuò)展 Hive示例 一個完整的數(shù)據(jù)分析案例(分別使用mapreduce、pig、hive進(jìn)行分析) 集成Hadoop到現(xiàn)有工作流(使用sqoop)(關(guān)系數(shù)據(jù)庫管理系統(tǒng);利用Sqoop從關(guān)系型數(shù)據(jù)庫系統(tǒng)中導(dǎo)入數(shù)據(jù)到Hadoop)

第三天

一、大數(shù)據(jù)分析架構(gòu)之分布式數(shù)據(jù)庫：Nosql與Hbase

Nosql簡介 常見Nosql介紹 Hbase介紹 Hbase體系架構(gòu) Hbase安裝(含本地、偽分布式、完全分布式) Hbase操作演示 Hbase應(yīng)用案例

二、大數(shù)據(jù)分析核心技術(shù)在企業(yè)中的應(yīng)用以及Hadoop調(diào)優(yōu)

Hadoop調(diào)優(yōu) Hadoop在企業(yè)中如何使用 (企業(yè)案例以及hadoop在企業(yè)IT架構(gòu)中的位置) Hadoop體系中單點(diǎn)解決方案(namenode,jobtracker,hive等) Hadoop生態(tài)環(huán)境其他產(chǎn)品在企業(yè)中的應(yīng)用

師資力量：

肖老師

計算機(jī)專業(yè) 現(xiàn)任天云科技(北京云基地)云計算解決方案咨詢師，負(fù)責(zé)GOV、運(yùn)營商等行業(yè)的售前咨詢。具有十多年IT行業(yè)經(jīng)驗(yàn)，熟悉軟件系統(tǒng)架構(gòu)設(shè)計，主要專業(yè)特長包括數(shù)據(jù)庫優(yōu)化、云管理平臺設(shè)計、分布式計算和存儲系統(tǒng)設(shè)計，全文檢索等領(lǐng)域。曾在美國紐約曼哈頓工作過一年，熟悉SIP軟交換、CDN加速、Hadoop、對象存儲等技術(shù)。具有豐富的項目實(shí)踐和教學(xué)經(jīng)驗(yàn)，對IT職業(yè)培訓(xùn)有深刻的理解。曾參與多個運(yùn)營商和大型銀行系統(tǒng)架構(gòu)設(shè)計，在高可用性高性能大容量系統(tǒng)領(lǐng)域有深入的研究，能夠結(jié)合實(shí)際,在復(fù)雜的應(yīng)用環(huán)境中選擇適合的分析技術(shù)來降低運(yùn)維風(fēng)險、縮短停機(jī)時間、提高運(yùn)維服務(wù)水平。擔(dān)任多個行業(yè)的云計算解決方案咨詢顧問。多次全國巡講。授課過程理論與實(shí)踐并重，深入淺出，講課詼諧幽默、氣氛活躍，深受廣大學(xué)員好評。

王老師

北京航空航天大學(xué)教授。主要研究方向是分布式系統(tǒng)，大規(guī)模數(shù)據(jù)計算系統(tǒng)及關(guān)鍵技術(shù)等。2007年以來，作為技術(shù)總負(fù)責(zé)人參與國家863計劃課題“中國國家網(wǎng)格軟件研究與開發(fā)”，負(fù)責(zé)軟件總體設(shè)計和核心技術(shù)研發(fā)。參與XtreemOS，OMII-EU/OMII-UK歐盟第六框架和英國e-Science國際合作項目。先后參與國家科技支撐項目《增強(qiáng)型搜索引擎研究及示范應(yīng)用》、《北京市安全局物聯(lián)網(wǎng)安全監(jiān)控項目》、《2012年倫敦奧運(yùn)會國家女排運(yùn)動視頻分析與設(shè)計》、《中國移動POC項目設(shè)計與開發(fā)》、《華為公司網(wǎng)絡(luò)高級應(yīng)用協(xié)議測試》《汽車制造工藝開發(fā)平臺》、《工商系統(tǒng)食品在線監(jiān)管》項目。在國內(nèi)外期刊多次發(fā)表學(xué)術(shù)論文及學(xué)術(shù)著作。