标题: 【视频】DB2 DWE在电信业数据挖掘中的应用(演讲者:张英)
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:40  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
【视频】DB2 DWE在电信业数据挖掘中的应用(演讲者:张英)

张 英——IBM中国有限公司 软件部信息管理( 商业智能能力中心) 高级技术工程师

2007年加入IBM,在IBM软件部(SWG)担任高级技术工程师,从事数据挖掘应用售前和技术支持工作。之前从2002年起,先后参与了化工、制药、炼油、电信等行业的数据挖掘项目的设计与工程实施,对于数据挖掘的行业应用,数据挖掘的方法论,高性能数据挖掘算法及其海量数据的挖掘建模有一定的研究;设计开发了基于SVM系列算法的数据挖掘软件ESP-DataMiner,将数据挖掘的应用拓展到数据环境更加复杂、更具挑战的领域。

主题:DB2 DWE在电信业数据挖掘中的应用——演讲者 张 英

目前国内电信、银行、保险、税务、零售等行业BI项目的相继建设,随着数据的大集中,数据挖掘应用也随之大量展开。企业通过实施数据挖掘,改进自己的营销策略,从中获取一定的回报。然而随着挖掘应用的深入、企业对数据挖掘期望的提高,数据挖掘同时也面临诸多挑战:如数据挖掘效益如何衡量,挖掘流程如何设计,挖掘项目管理如何规范,数据挖掘行业应用如何深入,面对海量数据,如何提高挖掘算法的精度、响应时间、泛化能力等,这些都是数据挖掘项目所不得不面临的问题。
本次讲座,以电信业数据挖掘为背景,抛砖引玉地探讨了这些问题。首先从数据挖掘工程实施的方法论入手,介绍几种常用的挖掘方法论;然后在方法论的基础上,介绍数据挖掘工程项目的调优以及数据挖掘的高性能算法;最后介绍电信行业挖掘主题以及基于IBM/IM的挖掘流程。

《DB2 DWE 在电信业数据挖掘中的应用》笔记

曾宏整理

数据挖掘最能体现数据仓库的亮点不仅仅是一个表报和查询系统,而是从现有的数据对未来趋势的一个判断和预测,并从数据中获取一些价值,数据挖掘真正的价值所在,是数据仓库发展的一个趋势。

涉及内容:
(一)数据挖掘方法论及挖掘项目的调优
(二)电信业数据挖掘主题
(三)DB2 DWE及其Mining特性介绍

(一)数据挖掘方法论及挖掘项目的调优
啤酒和尿布的故事(业务角度)
数据挖掘是算法的集合(技术角度)
数据挖掘是软件解决方案(厂商的角度)
数据挖掘是方法论应该是三者的结合,在特定的业务背景下,采用软件建立起一系列数据挖掘的流程

数据挖掘方法论:
在实施数据挖掘之前,先制定采取什么样的步骤,每一步都做什么,达到什么样的目标是必要的,有了好的计划才能保证数据挖掘有条不紊的实施并取得成功。很多软件供应商和数据挖掘顾问公司投提供了一些数据挖掘过程模型,来指导他们的用户一步步的进行数据挖掘工作。
价值、行为为导向的数据挖掘方法论的步骤如下
1.挖掘主题确定
2.数据调查与收集
包含 (用户及客户的基本信息变量、价值变量和行为变量)
3.构建挖掘宽表
4.数据探索与处理
5.构建挖掘模型
6.挖掘模型的分析与升华
根据价值和行为变量分别进行分群,通过挖掘模型的分析与升华变成业务市场人员能够理解的内容
7.营销策略的制定、执行与评估

数据挖掘项目的调优
不断循环带来数据挖掘项目的调优,数据挖掘项目的成功需要不断地优化挖掘流程
1、营销流程调优
2、挖掘建模流程调优
2.1、挖掘建模数据集的划分
2.2、算法调优
2.3、两个定理
3、分群过程中的建模流程调优
3.1、群体数目确定
3.2、输入变量的调整
3.3、算法调优
4、数据准备流程调优
4.1、数据调优增加数据质量
4.2、变量之间的相关性
4.3、设计派生变量
数据挖掘中的新方法—Support Vector Machine(SVM)

(二)电信业数据挖掘主题
电信行业为例,介绍数据挖掘的分析范围和实施流程
行业特征:以客户为中心,积累了大量的数据。
对客户进行分群
客户流失预测模型(树状模型)
客户欺诈预测模型
客户价值分析模型
交叉销售模型
新产品、业务的潜在客户预测
事件监控和事件营销

(三)DB2 DWE及其Mining特性介绍
IBM  DB2 数据仓库版是一个集成的、动态的数据仓库解决方案,提供数据仓库具备的各种性能,逐步进化为一个智能的数据仓库。

DWE 是IBM Information on Demand的基础,也是On Demand Business (业务流程的端到端集成)的基础,通过实现业务流程的端到端集成,流程之间形成一个自由的信息流。各种格式的信息需要的时候,能够从它当前驻留的应用程序中特定的地方释放出来。同时,信息作为一项服务进行交付,在需要它的时候,人们和流程可以地轻松地存取。 DWE正是为On Demand Business 提供一个同一的信息共享平台。

DWE 通过集成大量的分析应用工具,使得 数据仓库变得,容易用,容易买,容易理解;同时 DWE的价格策略消除了BI应用的成本壁垒;

那么客户从DWE中可以得到那些好处呢?
首先是简单,容易安装、图形化的用户工具;
避免客户的重复购买行为;
提供了从数据加载、处理、分析、发布、监控的整个数据分析流程;

IBM根据在多年数据仓库项目中积累的经验,向客户推荐采用平衡配置单元(Balanced Configuration Unit - BCU)这一系统架构构建数据仓库。



 附件: 您所在的用户组无法下载或查看附件
顶部
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:42  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
第一节


顶部
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:43  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
第二节


顶部
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:44  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
第三节


顶部
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:44  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
第四节


顶部
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:45  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈


顶部
[广告] 记录自己的思想火花,留住每日的技术积累,尽在拥有属于自己独立域名的博客。
艾依然
荣誉斑竹
Rank: 14Rank: 14Rank: 14Rank: 14



UID 91202
精华 2
积分 87
帖子 155
活跃指数 108
LU金币 441 个
LU金条 0 个
阅读权限 200
注册 2007-6-11
 
发表于 2007-10-16 10:47  资料  个人空间  短消息  加为好友  添加 艾依然 为MSN好友 通过MSN和 艾依然 交谈
曾宏牺牲自己的宝贵时间为大家整理出视频文字,为此表示衷心的感谢!

顶部
[广告] 记录自己的思想火花,留住每日的技术积累,尽在拥有属于自己独立域名的博客。
老农
管理员
Rank: 20Rank: 20Rank: 20Rank: 20Rank: 20
民工


LU爱心使者  
UID 2
精华 28
积分 17625
帖子 29772
活跃指数 1863
LU金币 25482 个
LU金条 0 个
阅读权限 255
注册 2003-9-16
来自 北京
 
发表于 2007-10-16 10:52  资料  个人空间  主页 短消息  加为好友  添加 老农 为MSN好友 通过MSN和 老农 交谈 QQ
大家也要感谢LZ的热心推荐哦





10月13号开始,IBM小机HACMP培训,广州,老农讲
专业提供IBM小机及存储技术支持、实施、维保和培训,代理备机及配件。EMAIL:allenlong68[at]hotmail.com([at]换成@)

AIX交友QQ群:24807728(群是朋友聊天用的,技术请在论坛谈。群满时,不常活动的会被请出,给新人腾位置)
QQ里谈技术没积累,是方便自己麻烦别人;在论坛里讨论,可以大家都参与,并留做参考。
技术不是简单看个文档就能提高的,多参与讨论进步快。对问题有见解的就发一下,说对了是帮助别人,说错了给机会纠正自己。
顶部
[广告] 记录自己的思想火花,留住每日的技术积累,尽在拥有属于自己独立域名的博客。
beginner-bj
版主
Rank: 15Rank: 15Rank: 15Rank: 15Rank: 15


UID 9471
精华 16
积分 1479
帖子 2528
活跃指数 209
LU金币 4824 个
LU金条 0 个
阅读权限 210
注册 2004-1-16
 
发表于 2007-10-16 20:38  资料  个人空间  短消息  加为好友 
如果能下载下来就更好了





我的博客:http://blog.chinaunix.net/index.php?blogId=739欢迎访问,并请多多批评指正。
顶部
[广告] 记录自己的思想火花,留住每日的技术积累,尽在拥有属于自己独立域名的博客。
banker
LU天使
Rank: 4



UID 653
精华 0
积分 802
帖子 1558
活跃指数 6
LU金币 2438 个
LU金条 0 个
阅读权限 50
注册 2003-10-16
 
发表于 2007-10-31 14:21  资料  个人空间  主页 短消息  加为好友  添加 banker 为MSN好友 通过MSN和 banker 交谈
这个可以下载么?艾依然? 谢谢





当我们讲话时,有人聆听。
当我们做事时,有人跟随。
当我们前进时,没有任何困难可以阻挡
顶部
liwenguo
LU幼天使
Rank: 2



UID 685
精华 0
积分 119
帖子 181
活跃指数 2
LU金币 2056 个
LU金条 0 个
阅读权限 20
注册 2003-10-17
 
发表于 2007-11-1 22:15  资料  个人空间  短消息  加为好友 
是啊 好冬冬

顶部
 



当前时区 GMT+8, 现在时间是 2008-10-11 22:56
乐悠LoveUnix论坛-京ICP备05005823号

Thanks to Discuz!  © 2001-2007    Power by LoveUnix.net
Processed in 0.067343 second(s), 6 queries , Gzip enabled

清除 Cookies - 联系我们 - 乐悠LoveUnix - Archiver