中国移动深度数据挖掘内训教材.pdf

1、深入数据挖掘分析深入数据挖掘分析陈剑数据统计和分析工具数据统计和分析工具专业分析工具-SAS-SPSS-Eview-Minitab-R-Excel商业智能工具(BI)-Analysis service-Brio-Cognes数据挖掘方法论数据挖掘方法论CRISP-DMCRISP-DM（Cross-Industry Standard Process for Data Mining）我们可以免费使用的工具我们可以免费使用的工具nOLAP软件nRnExcel数据分析工具库规划求解工具主观目的主观目的分析模型分析模型分析结果分析结果分析过程分析过程相同的结果可以相同的结果可以有不同的解释有不同的解释如

2、何写好市场分析报告如何写好市场分析报告市场分析报告的一般结构市场分析报告的一般结构Part 1:目的和使命Part 2:状况分析Part 3:策略和目标Part 4:战术手段Part 5:预算、成效分析和实施步骤Part 6:附加考虑Part 7:参考和引证状况分析状况分析-产品及总体市场分析-销售分布分析-竞争分析-金融分析-其他分析战术手段战术手段-市场-产品-分销-促销-价格-其他市场分析报告常用分析工具市场分析报告常用分析工具n数据图表nSWOT分析n波士顿矩阵市场分析报告的注意事项市场分析报告的注意事项n规则1：让你的报告有逻辑性n规则2：让你的报告简单n规则3：让你的报告精简n规则

3、4：让你的报告可信n规则5：让你的报告有力如何使用图表描述数据如何使用图表描述数据图表分析基础图表分析基础时间序列例如：1-6月份的营业额曲线组成百分比例如：各产品销售比重，各销售区域业绩对比项目比较例如：不同品牌电脑的价格、性能比较相关性例如：广告投入和销售额的关系组成部分组成部分项目比较项目比较时间序列时间序列频率频率相互关系相互关系饼饼图图条条形形图图柱柱形形图图折折线线图图散散点点图图基本的图形类型基本的图形类型组成部分组成部分项目比较项目比较时间序列时间序列频率频率相互关系相互关系圆圆环环图图雷雷达达图图圆圆锥锥图图面面积积图图圆圆点点图图选择适当的图形类型选择适当的图形类型0204

4、060十 万十 万烟台青岛大连沈阳天津济南哈尔滨威海什么时候什么时候应该应该用用柱柱图图？0500010000150002000025000安徽福建江苏上海浙江线柱线柱图图0500010000150002000025000安徽福建江苏上海浙江填充填充图图0500010000150002000025000安徽福建江苏上海浙江反映产品份额反映产品份额的的变化变化0%10%20%30%40%50%60%70%80%90%100%2000年年2001年年2002年年2003年年2004年年CRT等离子液晶2/8分析分析5年以上,20%5年以上,69%5年以下5年以下0%20%40%60%80%100%

5、120%销售人员百分比销售利润百分比工工作五年作五年以以上上的的销售人员销售额占销售人员销售额占69%对称直方图-70-50-30-1010305070一月份二月份三月份四月份五月份六月份七月份八月份九月份收入额（万元）支出额（万元）20042004年销售额情年销售额情况统计况统计年销售额情年销售额情况统计况统计051015202530354045第一季度第二季度第三季度第四季度第一季度第二季度第三季度第四季度西南地区西南地区西北地区西北地区华东地区华东地区华南地区华南地区20042004年销售额情况统计年销售额情况统计年销售额情年销售额情况统计况统计051015202530354045第一季

6、度第一季度第二季度第二季度第三季度第三季度第四季度第四季度西南地区西南地区西北地区西北地区华东地区华东地区华南地区华南地区20042004年销售额情年销售额情况统计况统计年销售额情年销售额情况统计况统计020406080100120140160第一季度第一季度第二季度第二季度第三季度第三季度第四季度第四季度西南地区西南地区西北地区西北地区华东地区华东地区华南地区华南地区主主要品牌在要品牌在一一级城级城市的市的份额变化份额变化0%2%4%6%8%Jul-03Aug-03Sep-03Oct-03Nov-03Dec-03TCLBirdSamsungAmoiKejianEastcomSonyErics

7、sonSiemensDbtelKonkaPanda什么时候用什么时候用条条形图形图？对称条对称条形图形图子子类分析类分析销售销售统计统计沙发37%电脑桌9%组合柜8%电视柜8%床垫22%床头柜5%席梦思11%床上用品39%销售销售统计统计沙发37%电脑桌9%组合柜8%电视柜8%床垫22%床头柜5%席梦思11%床上用品39%雷达雷达图图和和中心偏离度中心偏离度比较比较雷达雷达图图：表表现平衡度现平衡度柏拉柏拉图图不不合格键盘原因合格键盘原因分析分析61.0%81.1%05001000150020002500黑点损坏喷口针迹坏的字模刮痕银色带下划线破折号偏差0%20%40%60%80%100%12

8、0%散点散点图图：相关相关性性分析分析广告与销量的关系图广告与销量的关系图010020030040050060025303540455055606570广告额（万元）销量（万元）广告与销量的关系图广告与销量的关系图010020030040050060025303540455055606570广告额（万元）销量（万元）占占有率有率坐标轴应坐标轴应用用业务额（万元）01002003004005001月2月3月4月5月6月7月8月9月10月11月12月业务额（万元）波士顿矩阵波士顿矩阵波士顿矩阵与气泡波士顿矩阵与气泡图图气泡气泡图图SWOT分析分析客户细客户细分分传统的细分类型态度态度需求需求/动机

9、动机购买因素购买因素产品产品/服务服务使用场使用场合合客户价值客户价值使用使用行为行为人口特征人口特征地理位置地理位置细细分市场分市场类型类型可供选择的客户细分方法43实施实施的的难易难易程程度度人口人口统计统计(Demographical)客户价值客户价值(Customer Value)行为行为方方式式(Behavioral)态度态度(Attitudinal)性性别别 年年龄龄 户户藉藉 职业职业 婚姻婚姻状况状况 教育教育程程度度 收收入入通话通话时段时段繁忙繁忙和和非繁忙通话量非繁忙通话量漫游漫游服务服务方方便便程程度度行为行为方方式式的的变化变化高利润高利润率率中中等利润等利润率率低利

10、润低利润率率负利润负利润率率形形象象价值价值观观生活生活方方式式心理因素心理因素人口人口统计统计行为行为方方式式客户价值客户价值态度态度客户细客户细分方分方式范例式范例三维三维细细分分体体系系人口人口统计统计行为行为方方式式客户客户群群X客客户户价价值值客户客户全生命周期全生命周期的的精确营精确营销销客客户户获获取取客客户户提提升升客客户户成成熟熟客客户户衰衰退退客客户户流流失失VT基基于于OLAP的的客户客户消消费费行为细行为细分分基基于于数据挖掘数据挖掘技技术的术的聚聚类分析类分析SPSS Clementine数据的数据的多维多维分析分析多维多维分析分析多维分析是指对以多维形式组织起来的数

11、据通过各种分析动作，剖析数据，使用户能从多个角度、多侧面多个角度、多侧面地观察数据库中的数据，从而深入理解包含在数据中的信息。数数据据的的价价值值在数据上的投资在数据上的投资数据知识知识知识知识在线分析工在线分析工在线在线分析工分析工具具具具多维分析多维分析多维多维分析分析KPIKPI多维在线分析多维在线分析透视力透视力透视力透视力/预见力预见力预见力预见力预测预测预测预测数理统计分析数理统计分析数数理理统计分析统计分析神经元网络神经元网络神经元网络神经元网络数据挖掘数据挖掘信息信息信息信息报表和查询报表和查询报表报表报表报表SQLSQL查询查询查询查询数据透视表数据透视表数据数据透视透视表表

12、商业智能的价值商业智能的价值商业智能的价值商业智能的价值把数据转化为知识把数据转化为知识把数据转化为知识把数据转化为知识多维多维分析分析多维多维分析的分析的概念概念n维度1维：1-12月销售额（时间）2维：1-12月各地区销售额（时间、地区）3维：1-12月各地区3个品种的销售额比较.n粒度2007年销售额 2007年8月销售额 2007年8月5日销售额n切片、切块、钻取和聚合BrandAfri ColaRoyal CrownPepsiCoca-ColaWrangler ColaCoca-ColaCoca-Cola24Week Ending031017ChannelMMDrugFood23.5

13、 MM UNITS$28.3 GROSS$26.8 COSTOLAPOLAP查询示查询示意图意图查询示查询示意图意图FoodFood2424“给给我我看看看看可可口口可可乐乐给给我我看看看看可可口口可可乐乐通通过过食食品品渠道渠道在在通通过过食食品品渠道渠道在在2424号那号那一一周周的的销售情销售情号那号那一一周周的的销售情销售情况况况况”数据库表与决策分析的报表数据库表与决策分析的报表数据数据库库表表与与决策决策分析的报表分析的报表帐号帐号姓名姓名地址地址电话电话余额余额101101张三张三张三张三北京北京北京北京(010)62567788(010)62567788100.00100.00

14、102102李四李四李四李四上海上海上上海海(021)54372012(021)54372012130.00130.00103103王五王五王王五五西安西安西安西安(029)34573228(029)34573228200.80200.80.销售数量销售数量（件）（件）北京北京上海上海广州广州成都成都一月一月100100200200600600752752二月二月300300292292200200328328三月三月250250300300200200746746数据库表：决策分析报表：数据数据仓库仓库和和商业智能商业智能Source:Salomon Smith Barney,IDC and

15、 Wall Street ResearchERPCRMSCMWebSiteOLTPSystemsVerticalData MartsVerticalData MartsEnterpriseDataWarehouseQuery&ReportingOLAPData MiningFinancial&Business PerformanceCRMOperation&ProductionBusiness Intelligence/Information Access ToolsAnalytical ApplicationsCategorizationContent ManagementEnterpris

16、e Information PortalEnd UserRaw DataETL,Data Warehouse&Marts/ManagementAggregationData AccessETLPersonalizationArtificialIntelligenceDataRepositoryUnstructuredDataUnstructured Data AccessOLAP提供提供的常用的常用功能功能n提供不同数据类型的数据分组手段-文本型、数值型、日期型n提供不同的汇总方式-求和、计数，百分比n可动态选择数据的分析方向-选择钻取方向-可定义粒度级别n允许添加自定义计算字段使用数据使用数据透视透视表表连接连接数据数据库库n设置外部数据源n连接外部数据源描述统计描述统计数据的数据的集集中中指指标标n算术平均数 AVERAGEn中位数 MEDIANn最大值/最小值（Max/Min)n去尾平均数TRIMMEANn四分位数 QUARTILE四四分分位位数数将数据从小到大排列，114nQ+=33(1)4nQ+=对应的顺序值，有25%的值比它小数据分数据分布布分析分析228594701020