大數(shù)據(jù)分析高級工程師培訓班(北京,3月14-16日)
【舉辦單位】曼頓培訓網(wǎng) www.mdpxb.com 中國培訓資訊網(wǎng) www.e71edu.com
【聯(lián)系電話】4006820825 010-56129138 13810210257 010-51140618
【培訓日期】2014年3月14-16日
【培訓地點】北京
【培訓對象】IT公司數(shù)據(jù)分析師、數(shù)據(jù)中心架構師、商業(yè)智能分析師、研發(fā)負責人、研發(fā)工程師、各地政府云計算、物聯(lián)網(wǎng)產(chǎn)業(yè)負責人,CIO、信息中心、技術總監(jiān),云計算產(chǎn)業(yè)投資團隊,云計算應用開發(fā)商,云計算硬件設備、運營服務提供商,高校、科研院所云計算項目負責人。高級開發(fā)工程師、設計師、架構師、系統(tǒng)管理員、開發(fā)經(jīng)理、測試經(jīng)理、產(chǎn)品經(jīng)理、項目經(jīng)理等。
培訓證書:工業(yè)和信息化部人才交流中心頒發(fā)的《工業(yè)和信息化領域急需緊缺人才》大數(shù)據(jù)分析高級工程師證書。證書可作為專業(yè)技術人員職業(yè)能力考核的證明,以及專業(yè)技術人員崗位聘用、任職、定級和晉升職務的重要依據(jù)。
【課程背景】
我培訓中心在人力資源和社會保障部、工業(yè)和信息化部聯(lián)合支持下,服務中國IT,創(chuàng)新企業(yè)未來。為深入實施人才強國戰(zhàn)略,進一步加快急需緊缺人才隊伍建設,推動人才培養(yǎng)工作更好地為經(jīng)濟社會發(fā)展服務,根據(jù)《國家中長期人才發(fā)展規(guī)劃綱要(2010-2020年)》和《專業(yè)技術人才知識更新工程實施方案(2010-2020年)》要求,我中心以新型工業(yè)化發(fā)展和信息化建設所涉及的經(jīng)濟領域為重點,緊緊圍繞構建和諧社會和“調(diào)結構、轉方式、促發(fā)展”的中心任務。為響應工業(yè)和信息化部2012年正式啟動“工業(yè)和信息化領域急需緊缺人才培養(yǎng)工程”。云計算作為戰(zhàn)略重點項目新興產(chǎn)業(yè),政府和業(yè)界都表現(xiàn)出了極大的熱情。
隨著云時代的來臨,大數(shù)據(jù)技術將具有越來越重要的戰(zhàn)略意義。大數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)和業(yè)務職能領域,逐漸成為重要的生產(chǎn)要素,人們對于海量數(shù)據(jù)的運用將預示著新一輪生產(chǎn)率增長和消費者盈余浪潮的到來。大數(shù)據(jù)分析技術將幫助企業(yè)用戶在合理時間內(nèi)攫取、管理、處理、整理海量數(shù)據(jù),為企業(yè)經(jīng)營決策提供積極的幫助。大數(shù)據(jù)分析作為數(shù)據(jù)存儲和挖掘分析的前沿技術,廣泛應用于物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)等戰(zhàn)略性新興產(chǎn)業(yè)。雖然大數(shù)據(jù)目前在國內(nèi)還處于初級階段,但是其商業(yè)價值已經(jīng)顯現(xiàn)出來。為加強大數(shù)據(jù)分析創(chuàng)新發(fā)展頂層設計和科學布局,推動相關人員更好理解和掌握大數(shù)據(jù)分析的關鍵技術原理、未來發(fā)展方向,為此培養(yǎng)大數(shù)據(jù)分析高級工程師。現(xiàn)將相關事宜通知如下:
【課程收益】
使參訓人員了解用戶體驗設計全套流程與方法,通過案例學習相關工具,認識到用戶體驗設計在產(chǎn)品中的重要性,了解UI設計的基本理念與實踐方法,并能夠通過流程的規(guī)范化來控制設計的過程與質(zhì)量,設計出讓客戶滿意和用戶喜愛的產(chǎn)品。
【課程大綱】
Hadoop在云計算技術的作用和地位
■傳統(tǒng)大規(guī)模數(shù)據(jù)分析存在的問題
■Hadoop概述
■Hadoop與分布式文件系統(tǒng)
■MapReduce的工作原理與機制
■Hadoop集群剖析
■Hadoop生態(tài)系統(tǒng)
■Hadoop的行業(yè)應用案例分析
■Hadoop在云計算和大數(shù)據(jù)的關系
Hadoop參數(shù)調(diào)優(yōu)
■選擇適合Hadoop的硬件配置
■Hadoop配置項優(yōu)化
■Hadoop配置優(yōu)化 – core-site.xml
■Hadoop配置優(yōu)化 – HDFS
■Hadoop配置優(yōu)化 – Hdfs-site.xml
■Hadoop配置優(yōu)化 – Mapred-site.xml
■Hadoop配置優(yōu)化 –機架感知
■網(wǎng)絡帶寬參數(shù)調(diào)優(yōu)
■系統(tǒng)參數(shù)調(diào)優(yōu)
■配置文件管理
■嚴格控制root權限
■Java的GC模式
■選擇正確的JDK
■Hadoop作業(yè)調(diào)優(yōu)
■Map side tuning設置
■Map side設置
■Linux操作系統(tǒng)優(yōu)化
■其他配置和參數(shù)調(diào)優(yōu)
mapreduce和pig
■高級mapreduce開發(fā)演示:combiners、partitioner;MRUnit;分布式緩存;join;二次排序等)
■Mapreduce開發(fā)之分布式緩存
■mapreduce模擬sql語言的各種操作
■除mapreduce外的hadoop數(shù)據(jù)分析工具介紹
■Pig之piglatin語言
■Pig之udf擴展
■Pig案例
hive與現(xiàn)有工具整合
■Hive深入介紹
■Hive之hql語言
■Hive之udf擴展
■Hive示例
■一個完整的數(shù)據(jù)分析案例(分別使用mapreduce、pig、hive進行分析)
■集成Hadoop到現(xiàn)有工作流(使用sqoop)
(關系數(shù)據(jù)庫管理系統(tǒng);利用Sqoop從關系型數(shù)據(jù)庫系統(tǒng)中導入數(shù)據(jù)到Hadoop)
Nosql與Hbase
■Nosql簡介
■常見Nosql介紹
■Hbase介紹
■Hbase體系架構
■Hbase安裝(含本地、偽分布式、完全分布式)
■Hbase操作演示
■Hbase應用案例
企業(yè)中的應用以及Hadoop調(diào)優(yōu)
■Hadoop調(diào)優(yōu)
■Hadoop在企業(yè)中如何使用
(企業(yè)案例以及hadoop在企業(yè)IT架構中的位置)
■Hadoop體系中單點解決方案(namenode,jobtracker,hive等)
■Hadoop生態(tài)環(huán)境其他產(chǎn)品在企業(yè)中的應用
案例介紹
■運營商日志詳單查詢系統(tǒng)
■銀行數(shù)據(jù)分析系統(tǒng)
■阿里巴巴去IOE架構(Mysql + Hadoop)
■智能電網(wǎng)數(shù)據(jù)采集分析系統(tǒng)
【講師介紹】
肖老師,中國培訓資訊網(wǎng)(www.e71edu.com)資深講師。計算機專業(yè)碩士 十余年IT行業(yè)經(jīng)驗,企業(yè)數(shù)據(jù)中心系統(tǒng)架構設計,性能管理與容量評估專家,主要專業(yè)特長包括基礎架構云平臺設計、服務器及存儲虛擬化、數(shù)據(jù)庫優(yōu)化、性能管理、容量評估等領域。具有豐富的教學和實踐經(jīng)驗,對IT職業(yè)培訓有深刻的理解。曾參與多家大型銀行系統(tǒng)架構設計,在高可用性高性能大容量系統(tǒng)領域有深入的研究,能夠結合實際,在復雜的應用環(huán)境中選擇適合的分析技術來降低運維風險、縮短停機時間、提高運維服務水平。多次全國巡講。授課過程理論與實踐并重,深入淺出,講課詼諧幽默、氣氛活躍,深受廣大學員好評。
王老師:中國培訓資訊網(wǎng)(www.e71edu.com)資深講師。北京航空航天大學教授。主要研究方向是分布式系統(tǒng),大規(guī)模數(shù)據(jù)計算系統(tǒng)及關鍵技術等。2007年以來,作為技術總負責人參與國家863計劃課題“中國國家網(wǎng)格軟件研究與開發(fā)”,負責軟件總體設計和核心技術研發(fā)。參與XtreemOS,OMII-EU/OMII-UK歐盟第六框架和英國e-Science國際合作項目。先后參與國家科技支撐項目《增強型搜索引擎研究及示范應用》、《北京市安全局物聯(lián)網(wǎng)安全監(jiān)控項目》、《2012年倫敦奧運會國家女排運動視頻分析與設計》、《中國移動POC項目設計與開發(fā)》、《華為公司網(wǎng)絡高級應用協(xié)議測試》《汽車制造工藝開發(fā)平臺》、《工商系統(tǒng)食品在線監(jiān)管》項目。在國內(nèi)外期刊多次發(fā)表學術論文及學術著作。
【費用及報名】
1、費用:培訓費5000元(含培訓費、講義費);如需食宿,會務組可統(tǒng)一安排,費用自理。
2、報名咨詢:4006820825 010-56129138 63836477 13810210257 010-51140618 鮑老師
3、報名流程:電話登記-->填寫報名表-->發(fā)出培訓確認函
4、備注:如課程已過期,請訪問我們的網(wǎng)站,查詢最新課程
5、詳細資料請訪問曼頓培訓網(wǎng):www.mdpxb.com (每月在全國開設四百多門公開課,歡迎報名學習)