企业级数据挖掘平台EDM-CRISP-DM

来源:互联网 发布:华为软件发布 编辑:程序博客网 时间:2024/06/06 07:41

CRISP-DM 模型数据挖掘最常用的标准流程,它为一个知识发现工程提供了一个完整的过程描述。该模型将一个知识发现工程分为6个不同的、但顺序并非完全不变的阶段,如下图所示。

(1)      业务理解(Business Understanding)

最初的阶段集中在理解项目目标和从业务的角度理解需求,同时将这个知识转化为数据挖掘问题的定义和完成目标的初步计划。

(2)      数据理解(DataUnderstanding)

数据理解阶段从初始的数据收集开始,通过一些活动的处理,目的是熟悉数据,识别数据的质量问题,首次发现数据的内部属性,或是探测引起兴趣的子集去形成隐含信息的假设。

(3)      数据准备(DataPreparation)

数据准备阶段包括从未处理数据中构造最终数据集的所有活动。这些数据将是模型工具的输入值。这个阶段的任务有个能执行多次,没有任何规定的顺序。任务包括表、记录和属性的选择,以及为模型工具转换和清洗数据。

(4)      建模(Modeling)

在这个阶段,可以选择和应用不同的模型技术,模型参数被调整到最佳的数值。一般,有些技术可以解决一类相同的数据挖掘问题。有些技术在数据形成上有特殊要求,因此需要经常跳回到数据准备阶段。

(5)      评估(Evaluation)

到项目的这个阶段,你已经从数据分析的角度建立了一个高质量显示的模型。在开始最后部署模型之前,重要的事情是彻底地评估模型,检查构造模型的步骤,确保模型可以完成业务目标。这个阶段的关键目的是确定是否有重要业务问题没有被充分的考虑。在这个阶段结束后,一个数据挖掘结果使用的决定必须达成。

(6)      部署(Deployment)

通常,模型的创建不是项目的结束。模型的作用是从数据中找到知识,获得的知识需要便于用户使用的方式重新组织和展现。根据需求,这个阶段可以产生简单的报告,或是实现一个比较复杂的、可重复的数据挖掘过程。在很多案例中,这个阶段是由客户而不是数据分析人员承担部署的工作。


---------------------------------------------------------------------

1)模型平台:

预测模型

探索模型

产出:模型池


2)模型应用:


3)模型监测与验证:




0 0
原创粉丝点击