大数据技术介绍、数据挖掘与分析
Oliver Yu 查看讲师
百林哲咨询(北京)有限公司专家团队成员
​资深大数据库和数据分析专家,22 年的行业经验(运营商、互联网、金融证券行业),15 年以上大数据治理(数据标准化、元数据管理、数据质量及架构设计、业务建模、主数据管理、项目管理等)方向培训经验。
浏览:3692次
详情 DETAILS

简介

本课程通过了解当前数据增长,出现海量数据的情况下,我们需要用到大数据的分析技术,同时认识在运营环境下数据分析和数据挖掘的特点,主要介绍了大数据的相关思想及相关技术和应用案例,数据挖掘的基本理论和实际应用技术,包括数据分析方法、案例以及数据挖掘中的关联分析技术、分类和预测技术、聚类分析技术等。解释了如何将数据挖掘应用于解决实际问题,从而使你能将数据挖掘技术应用于自己的实际工作中去。课程还着重介绍了数据挖掘模型的建立与测试,以及数据挖掘结果的解释与验证以及数据分析和数据挖掘在相关行业的应用实例等内容。

本课程不是简单的数据挖掘的概念讲解,把技术、案例、问题结合起来,把理论实践化,让学者能深入体会数据挖掘的应用。

目标

通过本课程的教学,使学员充分了解和认识大数据的相关知识(大数据的应用范围及相关技术思想),同时学会用主流的数据挖掘软件完成数据挖掘建模任务,使学员掌握数据挖掘方法论CRISP-DM的本质。通过几个具体的、典型的数据挖掘案例,使学员在掌握这些案例所用的技巧的同时,充分理解数据挖掘的方法论,实现举一反三的效果,提高学员分析问题解决问题的实际能力。

分享提纲

第一部分 大数据的介绍

 

1.什么是大数据?

    海量非结构化数据本身+处理方法

2.大数据为什么重要及大数据带来的机遇

   决定了公司是否有未来和业务可延伸范围

3.对大数据的深层理解

大数据的组成及特点介绍

4.大数据的相关技术与应用案例

  大数据的相关技术 如:

 数据采集:ETL工具

数据存取:关系数据库;NoSQL;SQL等

基础架构支持:云存储;分布式文件系统等

计算结果展现:云计算;标签云;关系图等

5.大数据专题可能的演进路径

第二部分:数据分析基础

1.认识数据分析:

   1)数据分析的含义

   2)数据分析主要做什么?

 2.为什么要学习做好数据分析

   1)从数据分析的描述问题、对比问题、分析问题 到最后解决问题说明为什么要做好

   2)通过案例说明一般人员与数据分析师的区别

 3.数据分析的误区和分析的关键

 4.数据分析的6个步骤,3大方向(理清思路,寻找答案,观点表达)

     步骤1:需求明确--理清思路

     步骤2:数据收集--理清思路

     步骤3:数据处理--寻找答案

     步骤4:数据分析--寻找答案

     步骤5:数据展示--观点表达   

     步骤6:报表撰写--观点表达

   分别对以上6个步骤以案例的方式详细说明。

    实践:以**数据分析项目为引子,学习怎样将数据分析的技能与具体业务项目结合起来应用于实际的工作之中 

第三部分:数据挖掘基础

1、数据挖掘概述

数据挖掘基本理念

数据挖掘历史发展进程

数据挖掘主要功能

数据挖掘的发展趋势

2、数据挖掘方法论

CRISP-DM

SEMMA

3、数据处理过程

变量和数据

变量的分类及类型

数据的质量

数据理解过程

数据准备过程

第四部分:数据挖掘及数据分析技术

1.数据挖掘主要分析方法:

   1.聚类分析(Clustering)

2.分类分析(Classification)

3.关联分析(Association)

4.预测分析(Prediction)

5.回归分析

6.相关分析

7.数据比较分析  

8.数据挖掘的可视化  

2.数据挖掘的实施

3.分析图形: 正态性检验 描述性统计 箱型图、区间图、时序图 介绍

4.数据挖掘的关键技术:数据预处理

5.数据挖掘效果的评估

  实践:SPSS结合相应的分析算法及展示图

第五部分:构建**数据挖掘分析体系

1、分析团队建设

2、分析工作管理

3、数据分析核心能力建设

4、分析工作与业务协同

第六部分.数据挖掘应用

1.数据挖掘及管理经验

2.数据挖掘在***行业领域的应用举例

2.1 客户行为与潜在客户分析

2.2  用户信用度分析

2.3  趋势预测

2.4新产品交叉营销分析 等

3.数据挖掘实践举例:客户流失、趋势发展分析等(结合SPSS软件)

实践:内容包括 从设计->形成模型->应用.  

第七部分 数据挖掘工具及未来研究的方向和热点

 

1.几种数据挖掘工具比较

2.典型工具介绍及使用范围

3.如何选择数据挖掘工具

4.数据挖掘的方向和热点


 


企业服务热线:400-106-2080
电话:18519192882
投诉建议邮箱:venus@bailinzhe.com
合作邮箱:service@bailinzhe.com
总部地址:
北京市-丰台区-汽车博物馆东路6号3号楼1单元902-B73(园区)
全国客户服务中心:
天津市-南开区-桂苑路15号鑫茂集团鑫茂军民园1号楼A座802-803
公众号
百林哲咨询(北京)有限公司 京ICP备2022035414号-1