課程描述INTRODUCTION
大數據分析挖掘課程
日程(cheng)安排SCHEDULE
課程大綱Syllabus
大數據分析挖掘課程
培訓受眾:
1.系統架構師、系統分析師、高級程序員、資深開發人員。
2.牽涉到大數據處理的數據中心運行、規劃、設計負責人。
3.政府機關.金融保險、移動和互聯網等大數據來源單位的負責人。
4.高校、科研院所牽涉到大數據(ju)與分布式數據(ju)處(chu)理的項目(mu)負責(ze)人(ren)。
課程收益:
1.全面了解大數據處理技術的相關知識。
2.學習Hadoop/Yarn/Spark的核心數據分析技術
3.深入學習Mahout/MLlib挖掘工具在大數據中的使用。
4.掌握Storm流處理技(ji)術和Docker等技(ji)術與大數據挖掘結(jie)合(he)的方法。
培訓目標
1.全面了解大數據處理技術的相關知識。
2.學習Hadoop/Yarn/Spark的核心數據分析技術
3.深入學習Mahout/MLlib挖掘工具在大數據中的使用。
4.掌握(wo)Storm流(liu)處(chu)理技(ji)術和Docker等技(ji)術與大數據挖掘(jue)結(jie)合(he)的方法。
學員基礎
1.對IT系統設計有一定的理論與實踐經驗。
2.數據倉庫與數據挖掘處理有一定的基礎知識。
3.對Hadoop/Yarn/Spark大數(shu)據技術有一定的了(le)解。
培訓要點
本課程從大數據挖掘分析技術實戰的角度.結合理論和實踐.全方位地介紹Mahout和 MLlib等大數據挖掘工具的開發技巧。本課程涉及的主題包括:大數據挖掘及其背景.Mahout和 MLlib大數據挖掘工具.推薦系統及電影推薦案例.分類技術及聚類分析.以及與流挖掘和Docker技術的結合.分析了大數據挖掘前景分析。
本課程教學過程中還提供了案例分析來幫助學員了解如何用Mahout和 MLlib挖掘工具來解決具體的問題.并介紹了從大數據中挖掘出有價值的信息的關鍵。
本(ben)課(ke)程(cheng)(cheng)不是(shi)一個(ge)泛(fan)泛(fan)的(de)(de)理(li)論(lun)性、概念(nian)性的(de)(de)介紹課(ke)程(cheng)(cheng).而是(shi)針(zhen)對問題(ti)(ti)討(tao)論(lun)Mahout和 MLlib解決方(fang)案的(de)(de)深入課(ke)程(cheng)(cheng)。對于上述(shu)領域有深入的(de)(de)理(li)論(lun)研究(jiu)與實(shi)(shi)踐經驗(yan).在(zai)課(ke)程(cheng)(cheng)中將(jiang)會(hui)針(zhen)對這些問題(ti)(ti)與學員一起進行(xing)研究(jiu).在(zai)關鍵點(dian)上還會(hui)搭建實(shi)(shi)驗(yan)環境進行(xing)實(shi)(shi)踐研究(jiu).以加深對于這些解決方(fang)案的(de)(de)理(li)解。通過(guo)本(ben)課(ke)程(cheng)(cheng)學習.希望推動大數據(ju)分析挖掘項(xiang)目開(kai)發(fa)上升到(dao)一個(ge)新水平。
培訓內容
第一講大數據挖掘及其背景
1)數據挖掘定義
2)Hadoop相關技術
3)大數據挖(wa)掘知識點
第二講 MapReduce/DAG計算模式
1)分布式文件系統DFS
2)MapReduce計算模型介紹
3)使用MR進行算法設計
4)DAG及其算法設計(ji)
第三講 云挖掘工具Mahout/MLib
1)Hadoop中的Mahoutb介紹
2)Spark中的Mahout/MLib介紹
3)推薦系統及其Mahout實現方法
4)信息聚類及其MLlib實現方法
5)分類技術在Mahout/MLib中的實(shi)現方法
第四講 推薦系統及其應用開發
1)一個推薦系統的模型
2)基于內容的推薦
3)協同過濾
4)基于(yu)Mahout的電影推薦案例
第五講 分類技術及其應用
1)分類的定義
2)分類主要算法
3)Mahout分類過程
4)評估指標以及評測
5)貝(bei)葉斯算法(fa)新聞(wen)分類(lei)實例
第六講 聚類技術及其應用
1)聚類的定義
2)聚類的主要算法
3)K-Means、Canopy及其應用示例
4)Fuzzy K-Means、Dirichlet及其應用示例
5)基于MLlib的新聞聚類實(shi)例
第七講 關聯規則和相似項發現
1)購物籃模型
2)Apriori算法
3)抄襲文檔發現
4)近鄰搜索的(de)應(ying)用
第八講 流數據挖掘相關技術
1)流數據挖掘及分析
2)Storm和流數據處理模型
3)流處理中的數據抽樣
4)流過濾(lv)和Bloom filter
第九講 云環境下大數據挖掘應用
1)與Hadoop/Yarn集群應用的協作
2)與Docker等其它云工具配合
3)大數據(ju)挖掘(jue)行(xing)業應用展望
大數據分析挖掘課程
轉載://citymember.cn/gkk_detail/257421.html
已開課時(shi)間Have start time
- 張曉誠
大數據營銷內訓
- 建材門店--微信獲客與運營 武建偉
- 大數據項目解決方案及應用 胡國慶(qing)
- 企業區塊鏈技術的應用場景與 李璐
- 《大數據精益化營銷思維與運 喻國慶(qing)
- 《銀行--網絡消費行為與網 武(wu)建偉
- 《精細運營——京東/天貓平 武建偉
- 數據驅動價值 ——基于Ex 張曉如
- 《大數據分析與客戶開發》 喻國慶(qing)
- 大數據提升:用戶體驗提升與 武建偉
- 《流量神器,銷量升級:如何 武建(jian)偉(wei)
- 能源電力企業數字化轉型探索 李開東
- 數據創造價值——大數據分析 張曉如(ru)