課程描述INTRODUCTION
數(shù)據(jù)挖掘與大數(shù)據(jù)技術(shù)
· 高層管理者· 中層領(lǐng)導(dǎo)· 其他人員



日程安排SCHEDULE
課程大綱Syllabus
數(shù)據(jù)挖掘與大數(shù)據(jù)技術(shù)
課程簡(jiǎn)介:
本次課程將介紹數(shù)據(jù)挖掘與大數(shù)據(jù)技術(shù)的基本理論和體系架構(gòu),通過(guò)大型數(shù)據(jù)挖掘和大數(shù)據(jù)處理項(xiàng)目案例闡述數(shù)據(jù)挖掘和大數(shù)據(jù)項(xiàng)目的實(shí)施過(guò)程和方法。通過(guò)實(shí)際應(yīng)用案例講解數(shù)據(jù)清洗、數(shù)據(jù)預(yù)處理、數(shù)據(jù)挖掘算法等重要概念。詳細(xì)講解構(gòu)建數(shù)據(jù)挖掘體系的核心方法和技術(shù),并結(jié)合實(shí)際項(xiàng)目搭建數(shù)據(jù)挖掘環(huán)境。熟悉主流數(shù)據(jù)挖掘廠商及相關(guān)軟件產(chǎn)品的操作和使用。
課程特點(diǎn):
1、 培訓(xùn)過(guò)程中將以大型項(xiàng)目案例為背景,逐步講解整個(gè)數(shù)據(jù)挖掘的設(shè)計(jì)過(guò)程和實(shí)施方法
2、 課程將以深入淺出的案例讓學(xué)員輕松掌握數(shù)據(jù)挖掘相關(guān)概念和技術(shù)
3、 課程的重點(diǎn)是項(xiàng)目實(shí)施,將深入探討數(shù)據(jù)挖掘項(xiàng)目的實(shí)施問(wèn)題,逐一解決項(xiàng)目實(shí)施過(guò)程中所遇到的問(wèn)題和處理技巧
4、 結(jié)合動(dòng)手實(shí)驗(yàn)和小而精的例子,使學(xué)員充分理解數(shù)據(jù)挖掘架構(gòu)設(shè)計(jì)和相關(guān)實(shí)施工具的使用
課程大綱:
專題一:數(shù)據(jù)挖掘基礎(chǔ)知識(shí)
內(nèi)容一:數(shù)據(jù)挖掘基本概念
1、 數(shù)據(jù)挖掘的來(lái)源
2、 數(shù)據(jù)挖掘的定義
3、 數(shù)據(jù)挖掘的應(yīng)用領(lǐng)域
4、 數(shù)據(jù)挖掘的行業(yè)背景
內(nèi)容二:BI的架構(gòu)
1、BI體系介紹
2、數(shù)據(jù)倉(cāng)庫(kù)介紹
3、ETL介紹
4、多維數(shù)據(jù)庫(kù)介紹
5、前端展現(xiàn)介紹
6、數(shù)據(jù)挖掘模型介紹
內(nèi)容三、數(shù)據(jù)挖掘在行業(yè)中的應(yīng)用
1、現(xiàn)代企業(yè)數(shù)據(jù)挖掘需求概述
2、電信行業(yè)案例分析
3、金融行業(yè)案例研究
4、銷售行業(yè)案例分析
5、BI系統(tǒng)數(shù)據(jù)更新與維護(hù)
介紹數(shù)據(jù)挖掘基本概念,BI體系架構(gòu), 數(shù)據(jù)挖掘工具介紹及其應(yīng)用,針對(duì)電信等行業(yè)提供行業(yè)解決方案和案例分析。
專題二:數(shù)據(jù)挖掘架構(gòu)設(shè)計(jì)與完整流程詳解
內(nèi)容一:九種數(shù)據(jù)挖掘算法
1、 九種挖掘算法應(yīng)用的背景
2、 決策樹(shù)算法與模型設(shè)計(jì)
3、 聚類算法與模型設(shè)計(jì)
4、 關(guān)聯(lián)規(guī)則算法與模型設(shè)計(jì)
5、 貝葉斯算法與模型設(shè)計(jì)
6、 時(shí)間序列算法與模型設(shè)計(jì)
7、 其他挖掘算法與模型設(shè)計(jì)
內(nèi)容二:常用挖掘模型詳解
1、決策樹(shù)算法詳解及工具實(shí)現(xiàn)
2、聚類算法詳解及工具實(shí)現(xiàn)
3、關(guān)聯(lián)規(guī)則算法詳解及工具實(shí)現(xiàn)
4、貝葉斯算法詳解及工具實(shí)現(xiàn)
5、時(shí)間序列算法詳解及工具實(shí)現(xiàn)
6、數(shù)據(jù)挖掘模型評(píng)估
內(nèi)容三:數(shù)據(jù)挖掘的流程
1、數(shù)據(jù)清洗準(zhǔn)備
2、數(shù)據(jù)預(yù)處理
3、選擇數(shù)據(jù)挖掘模型
4、數(shù)據(jù)挖掘模型訓(xùn)練
5、更新算法模型
6、模型評(píng)估
7、部署與應(yīng)用
內(nèi)容四:DMX語(yǔ)言
1、DMX語(yǔ)法結(jié)構(gòu)
2、使用DMX創(chuàng)建挖掘模型
3、使用DMX將挖掘結(jié)果導(dǎo)出
4、使用DMX進(jìn)行挖掘模型參數(shù)設(shè)置
九種數(shù)據(jù)挖掘算法與模型詳解,數(shù)據(jù)挖掘的設(shè)計(jì)與實(shí)施流程,數(shù)據(jù)挖掘查詢語(yǔ)言的使用等,重點(diǎn)對(duì)決策樹(shù)算法、關(guān)聯(lián)規(guī)則算法、聚類算法等給出詳細(xì)設(shè)計(jì)和處理流程。
專題三:大數(shù)據(jù)處理優(yōu)化部分
內(nèi)容一:大數(shù)據(jù)的特點(diǎn)
1、什么是大數(shù)據(jù)
2、大數(shù)據(jù)的特點(diǎn)
3、大數(shù)據(jù)在行業(yè)中的應(yīng)用
內(nèi)容二:大數(shù)據(jù)優(yōu)化方法詳解
1、大數(shù)據(jù)分區(qū)處理
2、使用中間表和臨時(shí)表
3、分批次處理與并行計(jì)算
4、建立廣泛的索引
5、建立緩存機(jī)制
6、使用文本和二進(jìn)制格式進(jìn)行處理
7、定制強(qiáng)大的清洗規(guī)則和出錯(cuò)處理機(jī)制
8、建立視圖或者物化視圖
9、其他優(yōu)化方法總結(jié)
內(nèi)容三:數(shù)據(jù)倉(cāng)庫(kù)中大數(shù)據(jù)的處理方式
1、數(shù)據(jù)倉(cāng)庫(kù)中的大數(shù)據(jù)特點(diǎn)
2、數(shù)據(jù)倉(cāng)庫(kù)中的大數(shù)據(jù)的處理方式
3、分布式數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)及應(yīng)用
內(nèi)容四:大數(shù)據(jù)高級(jí)應(yīng)用
1、大型項(xiàng)目中大數(shù)據(jù)的優(yōu)化案例分析
2、使用大數(shù)據(jù)優(yōu)化工具
3、數(shù)據(jù)倉(cāng)庫(kù)中的大數(shù)據(jù)性能調(diào)優(yōu)技巧
4、未來(lái)大數(shù)據(jù)的發(fā)展方向
大數(shù)據(jù)的概念、特點(diǎn)以及大數(shù)據(jù)的優(yōu)化方法,數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目中大數(shù)據(jù)的處理方式以及大數(shù)據(jù)的高級(jí)應(yīng)用等,針對(duì)大型數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目提供了完備的大數(shù)據(jù)優(yōu)化解決方案。
專題四:數(shù)據(jù)挖掘與大數(shù)據(jù)項(xiàng)目案例分析
內(nèi)容一:中國(guó)電信數(shù)據(jù)挖掘項(xiàng)目
1、項(xiàng)目介紹
2、復(fù)雜多系統(tǒng)多數(shù)據(jù)源的特點(diǎn)
3、ODS的使用
4、整體項(xiàng)目架構(gòu)設(shè)計(jì)
5、數(shù)據(jù)挖掘算法選取
6、數(shù)據(jù)挖掘模型設(shè)計(jì)
7、數(shù)據(jù)挖掘處理流程
8、數(shù)據(jù)抽取策略的制定
8、挖掘模型的更新技巧
內(nèi)容二:Search Funnel數(shù)據(jù)挖掘項(xiàng)目
1、項(xiàng)目介紹
2、項(xiàng)目中的海量數(shù)據(jù)
3、數(shù)據(jù)挖掘算法
4、數(shù)據(jù)挖掘模型構(gòu)建
5、數(shù)據(jù)的預(yù)處理技術(shù)
6、對(duì)挖掘模型進(jìn)行訓(xùn)練
7、展示數(shù)據(jù)挖掘模型結(jié)果
8、數(shù)據(jù)挖掘模型評(píng)估
內(nèi)容三:MSN大數(shù)據(jù)處理項(xiàng)目
1、項(xiàng)目介紹
2、項(xiàng)目中的超海量數(shù)據(jù)
3、大數(shù)據(jù)處理所遇到的問(wèn)題
4、使用并行處理和計(jì)算
5、大數(shù)據(jù)項(xiàng)目中的數(shù)據(jù)挖掘模型處理
6、項(xiàng)目中的報(bào)表展現(xiàn)
7、大數(shù)據(jù)處理思路總結(jié)
內(nèi)容四:AdventureWorks整體項(xiàng)目案例
1、案例介紹
2、ETL流程詳解
3、OLAP流程詳解
4、前端報(bào)表流程詳解
5、數(shù)據(jù)挖掘流程詳解
總結(jié)
大型數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘項(xiàng)目設(shè)計(jì)和實(shí)施,重點(diǎn)對(duì)項(xiàng)目架構(gòu)設(shè)計(jì)和數(shù)據(jù)完整處理流程做重點(diǎn)分析和詳細(xì)介紹,針對(duì)大型數(shù)據(jù)挖掘項(xiàng)目,提供了完備的解決方案,給出完整設(shè)計(jì)思路和數(shù)據(jù)處理技術(shù)應(yīng)用。
數(shù)據(jù)挖掘與大數(shù)據(jù)技術(shù)
轉(zhuǎn)載:http://www.moqiwei.com/gkk_detail/257420.html
已開(kāi)課時(shí)間Have start time
- 張曉誠(chéng)
大數(shù)據(jù)營(yíng)銷內(nèi)訓(xùn)
- 大數(shù)據(jù)應(yīng)用現(xiàn)狀與未來(lái)發(fā)展重 胡國(guó)慶
- 數(shù)字技術(shù)與數(shù)字工具應(yīng)用 王文琭
- 《跨境電商全鏈路AI賦能轉(zhuǎn) 黃光偉
- 政府?dāng)?shù)字化轉(zhuǎn)型實(shí)務(wù) 焦波
- 醫(yī)療行業(yè)數(shù)字化營(yíng)銷趨勢(shì)及實(shí) 王文琭
- 數(shù)字時(shí)代下的營(yíng)銷趨勢(shì) 韓天成
- 以需求為導(dǎo)向的大數(shù)據(jù)精準(zhǔn)營(yíng) 張世民
- 數(shù)智化領(lǐng)域新技術(shù)與典型應(yīng)用 胡國(guó)慶
- 《銀行數(shù)據(jù)驅(qū)動(dòng)經(jīng)營(yíng)方法論與 宗錦(
- 《數(shù)據(jù)資源入表與數(shù)據(jù)治理》 鐘凱
- 數(shù)字經(jīng)濟(jì)時(shí)代銀行開(kāi)展數(shù)字化 李勇
- 數(shù)字經(jīng)濟(jì)與數(shù)據(jù)技術(shù)應(yīng)用與變 王文琭