CRM中的商业智能之数据挖掘全视图

来源：论坛作者：佚名出处：巧巧读书 2007-08-18 进入讨论组

　　2.1.2. 根据挖掘对象

　　可分为关系数据库、面向对象数据库、空间数据库、时态数据库、文本数据源、多媒体数据库、异质数据库以及环球网Web。

　　2.1.3. 根据挖掘方法

　　可粗略地分为：机器学习方法、统计方法、神经网络方法、决策树、可视化、最近邻技术等。在机器学习中，可细分为归纳学习方法(决策树、规则归纳等)、基于范例学习、遗传算法等;在统计方法中，可细分为:回归分析(多元回归、自回归等)、判别分析(贝叶斯判别、费歇尔判别、非参数判别等)、聚类分析(系统聚类、动态聚类等)、探索性分析(主元分析法、相关分析法等)等。

　　2.2. 知识发现过程

　　数据挖掘包括商业需求、大量的数据和挖掘算法三部分。商业需求是真正的数据挖掘前期要明确的工作。挖掘算法是目前研究的热点之一，主要围绕采用新的挖掘算法解决特定商业问题和对挖掘算法的改进上。由挖掘算法可形成挖掘工具。

　　知识发现过程可由三个主要阶段组成：数据准备、挖掘操作、结果表达和解释，知识发现是这三个阶段的反复。如图1所示。

　　2.2.1. 数据准备

　　数据集成将多文件或多数据库运行环境中的数据进行合并处理，解决语义模糊性、处理数据中的遗漏和清洗脏数据等。数据选择确定需要分析的数据集合，提高数据挖掘的质量。预处理是为了克服目前数据挖掘工具的局限性。

　　2.2.2. 数据挖掘

　　(1)先决定如何产生假设。是让数据挖掘系统为用户产生假设，还是用户自己参照数据库可能包含的知识提出假设。前一种称为发现型(discovery-driven)的数据挖掘，后一种称为验证型(verification-driven)的数据挖掘。

　　(2)选择合适的工具

　　(3)数据挖掘操作

　　(4)证实发现的知识

　　2.2.3. 结果表述和解释

　　把提取的信息进行分析，通过决策支持工具提交给决策者。这一阶段不仅把结果表达出来，而且知识发现系统会采用解释和推理机制，将这些知识直接提供给决策者，也可以提供给领域专家，修正已有知识库供系统共享。如果不满意，需要重复以上知识发现的过程。

　　3. 数据挖掘的研究热点

　　目前，数据挖掘的研究热点围绕挖掘算法展开。数据挖掘是综合了机器学习、人工智能、数据统计等学科的研究领域。随着数据挖掘工具在实际应用中的迅速增长，相关学科成熟的算法实现不断地加入到数据挖掘中来;挖掘算法的研究还包括对现有挖掘算法的优化和改进，比如使用全局搜索算法优化神经网络学习过程。除此以外，数据挖掘还有以下研究热点：

　　3.1.数据挖掘原语

　　我们把数据挖掘原语可以理解为有效辅助数据挖掘实施知识发现功能的思想和做法，是知识发现的辅助工具。数据挖掘原语的研究是为了支持有效的知识发现，为了让用户更加易于理解挖掘出来的知识。用户能够通过数据挖掘原语与数据挖掘系统通信，从不同的角度和深度审查发现结果，并指导挖掘过程。这组原语包括数据库说明的部分或用户感兴趣的数据集、要挖掘的知识类型、用于指导挖掘过程的背景知识、模式评估以及度量和如何显示所发现的知识等等。

　　3.2.数据挖掘语言及标准

　　数据挖掘行业是高度分散的，公司和研究机构独立开发各自的数据挖掘系统和平台，没有形成开放性的标准;同时数据挖掘本身是一门多学科综合跨度非常大的技术，这些造成了数据挖掘在通用性方面存在一系列问题：①各种数据挖掘问题及挖掘方法基于不同的模型和技术，彼此互相孤立，联系很少;②缺少简明精确的问题描述方法，挖掘的语义通常是由实现方法决定的;③数据挖掘系统仅提供孤立的知识发现功能，难于嵌入大型应用;④数据挖掘引擎与数据库系统是松散耦合的。数据挖掘语言和标准的开发有望解决上述问题。

　　目前，已实现的数据挖掘语言有DMQL、MSQL和MINE RULE等;数据挖掘语言标准有PMML(DMG：数据挖掘组织协会)和OLE DB for Data Mining(微软)。

　　3.3.数据挖掘系统

　　知识发现是一个有机的整体，各个部分之间有着密切的关系。我们称围绕某一数据挖掘任务的知识发现过程为数据挖掘系统。应该说所有的算法是为某一个挖掘系统服务的。数据挖掘系统的研究是为了建立科学的系统结构，利于挖掘算法的重用、嵌入，利于算法与系统其他模块有机结合。图3是一个挖掘系统的原型结构。

　　3.4.基于数据仓库的数据挖掘

　　把数据挖掘建立在数据仓库之上，一方面能够提高数据仓库系统的决策支持能力，另一方面，由于数据仓库完成了数据的清洗、ETL(抽取，转换，装载)，数据挖掘面对的是经过初步处理的数据，更加有利于数据挖掘功能的发挥。这方面的研究集中在基于数据仓库的数据挖掘系统结构的探讨上。

　　3.5.OLAM

　　OLAM将OLAP和数据挖掘功能集成在一起，可以实现数据挖掘功能的联机选择，为用户选择所期望的数据挖掘功能、动态地改变数据挖掘任务提供了灵活性。OLAM和OLAP通过图形用户界面GUI接受用户指令，对数据立方体Cube进行数据分析、挖掘。由于OLAM服务器可以执行如关联、分类、预测、聚类、时序分析等多种数据挖掘任务，它通常由多个集成的数据挖掘模块组成。

　　3.6.数据挖掘与具体应用的结合

　　数据挖掘目前在医学、电信、零售业等多个应用领域均有成功的应用案例。随着越来越多的业务需求被不断明确，数据挖掘应用的领域和解决的问题会越来越广泛;一些应用系统，如ERP、SCM、HR等系统也逐渐与数据挖掘集成起来，用以提高系统的决策支持能力。这方面的研究热点包括数据挖掘与商业智能(BI)、CRM、WEB应用的结合。

　　4.总结

　　数据挖掘是当前计算机工业最热门的研究领域之一。数据挖掘是一个不断发展的、综合交叉的学科。本文从知识的形态和知识产生的视角阐述了数据挖掘与知识发现、数据挖掘与OLAP的区别与联系，本文还总结了数据挖掘的分类以及数据挖掘在知识发现过程中的地位与作用。最后，对当前数据挖掘领域的研究热点进行了详细的概括与总结。

保留：： http://www.qqread.com/erp/5/p326776.html