精华内容
下载资源
问答
  • 数据挖掘算法Java实现

    2016-10-20 11:23:38
    这是数据挖掘算法的Java实现,正在学习数据挖掘的同学可以参照这些算法对照书本学习。
  • 数据挖掘常用算法代码实现
  • 本书对数据挖掘的基本算法进行了系统介绍,每种算法不仅介绍了算法的基本原理,而且配有大量例题以及源代码,并对源代码进行了分析,这种理论和实践相结合的方式有助于读者较好地理解和掌握抽象的数据挖掘算法。...
  • 数据挖掘算法原理与实现》王振武书中源代码及测试数据,出版社提供版本
  • 基于Python实现的新冠疫情数据挖掘案例分析.pdf
  • 基于数据挖掘的高校图书馆智能推送服务系统的设计与实现.pdf
  • 数据挖掘数据挖掘服务实现研究.pdf
  • 西电数据挖掘作业——对数据进行kmeans聚类python实现,使用的是python3版本,自己编写的,能够完美运行,里面有两个py文件,一个是主程序,一个是导入的算法,只需要运行主程序就行,数据啥的都准备好了
  • 浅谈数据挖掘数据挖掘服务的实现.pdf
  • 数据挖掘ID3算法(JAVA实现),在许多网上的例子上进行了一部分修改以及加上了更多的注释,希望可以给小白们带来帮助
  • 西电数据挖掘作业之利用Python编程实现Apriori算法,利用Python编程实现Apriori算法。
  • 数据挖掘中的ID3算法研究与实现.pdf
  • 包含很多知名算法实现,支持向量机,决策树,粗糙集,贝叶斯分类器等,适合学术研究,短评论意见挖掘,文本分类等83个数据挖掘算法。禁止商业利益,本资料供大家学习。
  • GTD数据集分析结果实现 对GDT全球反恐数据集进行分析和数据挖掘。 GTD数据集分析结果实现。 对GDT全球反恐数据集进行分析和数据挖掘,挖掘和分析哪些攻击是经常发生的,在哪些地方发生,在什么时间,什么纬度等,...
  • 常用数据挖掘算法总结及Python实现 第一部分 数据挖掘与机器学习数学基础 第二部分 机器学习概述 第三部分 监督学习---分类与回归 第四部分 非监督学习---聚类与关联分析 第五部分 Python 数据预处理
  • 数据挖掘的实验报告,共含五个实验,有具体的实验代码以及截图,自带实验感想。五个实验分别为数据预处理、数据立方体与联机分析处理构建、应用 Apriori 算法挖掘频繁项集、贝叶斯决策分类算法、k-均值聚类算法。原...
  • 数据预处理将原始的真实数据库转换成适于数据挖掘的挖掘数据库,为挖掘算法更好的实现以及挖掘结果形象的显示打下了良好的基础。针对结构化数据讨论了数据预处理的两个目标:消除现实数据库中的数据缺陷;为数据挖掘做...
  • 《R语言数据挖掘》R代码和案例数据《R语言数据挖掘》R代码和案例数据《R语言数据挖掘》R代码和案例数据
  • 数据挖掘在电力调度管理系统中的设计与实现.pdf
  • 基于严格数学计算的数据挖掘技术能够彻底改变以往电信企业在成功获得客户以后无法监控客户的流失,无法实现客户关怀的状况,把基于科学决策的客户关系管理全面引入到电信企业的市场/销售工作中来。  通常一个...
    随着世界经济的全球化、市场的国际化和我国加入WTO步伐的加速,国际化的市场环境要求国内的公众电信运营企业在经营管理上向国外先进的电信运营企业看齐,以迎接电信运营业的国际化竞争。同时随着国家改革的深化,国内电信业的市场环境已渐趋合理且竞争将日益加剧。国内、国际电信业的如此态势,对公众电信运营企业的服务内容、服务方式、服务质量、经营管理以及服务意识提出了严峻的挑战。企业的经营模式和服务体系正以客户的价值取向和消费心理为导向,真正体现“创造需求”、“引导消费”的现代客户服务意识与理念。 
    

      在电信企业面向市场、面向国内外众多的竞争者、努力创造更高价值的同时,客户流失的不断增加,客户平均生命周期的不断缩短严重影响了电信企业的发展。那么,在激烈的市场竞争和不断变化的市场需求面前,如何最大程度的降低客户的流失率呢?常用的方法之一就是利用数据挖掘技术。

      数据挖掘技术是目前数据仓库领域最强大的数据分析手段。它的分析方法是利用已知的数据通过建立数学模型的方法找出隐含的业务规则,在很多行业已经具有成功的应用。在电信行业的应用领域主要有客户关系管理,客户欺诈分析,客户流失分析,客户消费模式分析,市场推广分析等。

      在客户流失分析系统中,如何应用数据挖掘技术?主要方式是根据以前拥有的客户流失数据建立客户属性、服务属性和客户消费数据与客户流失可能性关联的数学模型,找出客户属性、服务属性和客户消费数据与客户流失的最终状态的关系,并给出明确的数学公式。只要知道客户属性、服务属性和客户消费数据,我们就可以计算出客户流失的可能性。市场/销售部门可以根据得到的数学模型随时监控客户流失的可能性。如果客户流失的可能性过高,高于事先划定的一个限度,就可以通过多种促销手段提高客户的忠诚度,防止客户流失的发生,从而可以大大降低客户的流失率。基于严格数学计算的数据挖掘技术能够彻底改变以往电信企业在成功获得客户以后无法监控客户的流失,无法实现客户关怀的状况,把基于科学决策的客户关系管理全面引入到电信企业的市场/销售工作中来。

      通常一个完整的数据挖掘过程由业务问题定义,数据选择,数据清洗和预处理,模型选择与预建立,模型建立与调整,模型的评估与检验,模型解释与应用等多个步骤组成。这里我们以个人客户流失为例说明各个步骤的功能。

      1. 业务问题的定义

      业务问题的定义要求非常明确。任何不明确的定义都会严重影响模型的准确和应用时的效果。例如:在客户流失分析系统中,需要明确客户流失的定义。在客户流失分析中,主要有两个核心的变量:1.财务原因/非财务原因;2.主动流失/被动流失。客户的流失类别根据这两个核心变量可以分为四种。其中自愿的、非财务原因的流失客户往往是高价值的、稳定的客户。他们会正常支付自己的服务费用,并对市场活动有所响应。所以这种客户才是我们真正想保持的客户。而真正在分析客户流失的状况时,我们还必须区分公司客户与个人客户,不同服务的贡献率,或者是不同客户消费水平流失标准的不同。举例来说,对于用一种新服务替代原有服务的客户,是否作为流失客户?又或者,平均月消费额为2000元左右的客户,当连续几个月消费额降低到500元以下,我们就可以认为客户发生流失了,而这个流失标准就不能适用于原本平均月消费额就为500元左右的客户。实际上,在国外成熟的电信行业客户流失分析系统中,经常是根据相对指标判别客户流失。市场调查表明,通常大众的个人通信费用约占总收入的1%-3%,当客户的个人通信费用降低到远远低于此比例时,就可以认为客户流失发生。所以,客户流失分析系统必须针对各种不同的种类分别定义业务问题,进而分别进行处理。

      2. 数据选择

      数据选择包括目标变量的选择,输入变量的选择和建模数据的选择等多个方面。

      目标变量的选择

      目标变量表示了数据挖掘的目标。在客户流失分析应用目标变量通常为客户流失状态。依据业务问题的定义,我们可以选择一个已知量或多个已知量的明确组合作为目标变量。目标变量的值应该能够直接回答前面定义的业务问题。在客户流失分析系统中,我们实际面对的流失形式主要有两种:账户取消发生的流失和账户休眠发生的流失。对于不同的流失形式,我们需要选取不同的目标变量。对于账户取消发生的流失,目标变量直接就可以选取客户的状态:流失或正常。对于账户休眠发生的流失,情况就较为复杂。通常的定义是持续休眠超过给定时间长度的客户被认为是发生了流失。但是,这个给定时间长度定义为多长合适呢?另外一方面,每月的通话金额低于多少就可以认为是客户处于休眠状态?或者要综合考虑通话金额,通话时长和通话次数来划定流失标准?实际上,目标变量的选择是和业务问题的定义紧密关联在一起的。选择目标变量所要面对的这些问题,都需要业务人员给予明确的回答。

      输入变量的选择

      输入变量用于在建模时作为自变量寻找与目标变量之间的关联。在选择输入变量时,我们通常选择两类数据:静态数据和动态数据。静态数据指的是通常不会经常改变的数据,包括服务合同属性,如服务类型,服务时间,交费类型等等;和客户的基本状态,如性别,年龄,收入,婚姻状况,受教育年限/学历,职业,居住地区等等。动态数据指的是经常或定期改变的数据,如每月消费金额,交费纪录,消费特征等等。输入变量的选择应该在业务人员帮助下进行,这样才能选择出真正与客户流失可能性具有潜在关联的输入变量。业务人员经常在实际业务活动中深深感觉到输入变量与目标变量的内在联系,但是却无法以量化表示出来。在这种情况下,数据挖掘的工作往往能够得到良好的回报。在一时无法确定某种数据是否与信用卡流失可能性有关联时,应该选取,在后续步骤考察各变量分布情况和相关性时再决定取舍。

    建模数据的选择

      通常电信行业客户流失的方向有两种。第一种是客户的自然消亡。例如由于客户的身故,破产,迁徙,移民等原因,导致客户不再存在。或者是由于客户的升级,如GSM 升级为CDMA,造成特定服务的目标客户消失。第二种是客户的转移流失。通常指客户转移到竞争对手享受服务。显然第二种流失的客户才是电信企业真正关心的,对企业具有挽留价值的客户。因此,我们在选择建模数据时必须选择第二种流失的客户数据参与建模,才能建立出较精确的模型。

      3. 数据清洗和预处理

      数据清洗和预处理是建模前的数据准备工作。数据清洗和预处理的目的一方面保证建模的数据是正确和有效的;另一方面,通过对数据格式和内容的调整,使建立的模型更加准确和有效。数据整理的主要工作包括对数据的转换和整合,抽样,随机化,缺失值的处理等等。数据转换和整合的工作目的就是为了保证数据的质量和可用性。例如,样本数据中客户最终流失的数据比例较低,只占全部数据的8%。用这样的数据建模不容易找出流失了的客户的特征,建立精确的模型。我们可以按比例抽取未流失客户和流失了的客户,把两者合并构成建模的数据源。还有,在建模之前,我们建议把样本数据分为两到三部分。一部分用来建模,其他数据用来对模型进行修正和检验。一个模型在建立以后,需要用大量的数据对它进行检验。只有经过实际数据检验并被证明正确的模型才能得到充分的相信。如果一个未经检验的模型被贸然推广使用,就有可能由于模型的不精确带来应用的损失。所以我们通常会把数据分为两部分:2/3的数据用来建模,1/3的数据用来检验。

      4. 模型选择与预建立

      到底哪些变量和客户流失概率有密切关系呢?我们需要利用数据挖掘工具中的相关性比较功能找出每一个输入变量和客户流失概率的相关性。通过这样的比较选择,我们可以删除那些和客户流失概率相关性不大的变量,减少建模变量的数量。这样不仅可以缩短建立模型的时间,减小模型的复杂程度,而且有时还能够使建立的模型更精确。Oracle的数据挖掘工具能够提供包括决策树,神经网络,近邻学习,回归,关联,聚类,贝叶斯判别等多种建模方法。但是哪种方法最适合用于信用卡流失分析呢?我们可以使用多种建模方法,预建立多个模型,再比较这些模型的优劣,从而选择出最适合客户流失分析的建模方法。Oracle的数据挖掘工具提供了建模方法选择的功能,它能够预建立决策树,神经网络,近邻学习,回归等多种方法,十个模型供使用者选择。它还能自动判别哪一个是最优的模型,供使用者参考。在预建模之前,使用者还能够改变模型的参数,从而根据实际情况生成更好的模型。

      5. 模型建立与调整

      模型建立与调整是数据挖掘过程中的核心部分。通常这部分工作会由专业的分析专家完成。需要指出的是,不同的商业问题和不同的数据分布与属性,经常会影响到模型建立与调整的策略。而且在建模过程中还会使用多种近似算法来简化模型的优化过程。所有这些处理方法,对模型的预测结果都会产生影响。所以在模型建立与调整过程中,需要业务专家参与制定调整策略,避免不适当的优化导致业务信息的丢失。

      6. 模型的评估与检验

      模型的评估应该利用未参与建模的数据进行,这样才能得到准确的结果。如果我们使用建模的数据对模型进行检验,由于模型就是按照这些数据建立的,检验结果自然会很好。但是一旦运用到实际数据中,就会产生很大的偏差。所以我们必须使用未参与建模的数据对模型进行检验。检验的方法是对已知客户状态的数据利用模型进行预测,得到模型的预测值,和实际的客户状态相比较。预测正确值最多的模型就是最优的模型。

      7. 模型解释与应用

      得到最优的模型以后,我们需要业务人员针对得到的模型做出一些合理的业务解释。例如:我们可能发现在开户时长与的客户的流失可能性相关度较高。那么,业务人员利用业务知识可以解释为:由于客户在使用一定年限后需要换领新SIM卡,而换领新SIM卡的手续比较繁琐或时间周期过长,客户宁愿去申请新号码,导致流失可能性上升量。通过对模型做出合理的业务解释,我们就有可能找出一些以前没有发现,但实实在在存在的潜在的业务规律。找出这些规律后,就可以指导我们的业务行为。另一方面,如果真的能够根据业务知识解释我们得到的数学模型,也说明了这个数学模型在业务上的合理性,我们就更能够大胆应用于业务活动中了。

      模型的真正应用推广必须谨慎从事。我们可以先选择一个试点单位应用模型,避免由于模型的不精确导致高额的业务损失。试点的时间可以界定在半年到一年,期间必须随时注意模型应用的收益情况。一旦发生异常偏差,应该立即停止,检查偏差是由于模型本身的原因还是由于应用环境发生了重大变化,从而导致模型不再适用。如果是由于模型本身不准确造成的,可以对模型不精确的部分进行修正。如果是由于应用环境发生了重大变化,就应该重新进行建模工作。当试点结束后,这个模型被证明应用良好,就可以考虑大面积的推广。

      在大面积推广时应该注意的是,由于地区经济差异的原因,模型不能完全照搬。所以可以由总公司建立一个通用的模型,各分公司在此基础上利用本地数据进行进一步修正,得到适用于本地的精确模型。模型在应用一段时期后,或经济环境发生重大变化后,有可能模型的偏差会增大,这时候就可以考虑重新建立一个更合适的模型。

    展开全文
  • .1 数据挖掘处理的对象有哪些?请从实际生活中举出至少三种。 答:数据挖掘处理的对象是某一专业领域中积累的数据,对象既可以来自社会科学,又可以来自自然科学产生的数据,还可以是卫星观测得到的数据。数据形式和...
  • 建模应用篇主要介绍了目前在数据挖掘中的常用的建模方法在Python中的实现函数,并对输出结果进行了解释,有助于读者快速掌握应用Python进行分析挖掘建模的方法。本书配套提供了书中使用的示例代码及所用的数据,读者...
  • 数据挖掘的一个例子

    2019-03-01 16:25:42
    数据挖掘的一个例子--以图书馆借书数据为例 博文链接:https://seawavecau.iteye.com/blog/108576
  • 数据挖掘(KDD)聚类算法KMEANS的MATLAB实现
  • 自己编写的十大经典R语言数据挖掘算法
  • 关联规则Apriori算法Python实现数据集,Apriori算法是一种挖掘关联规则的频繁项集算法,其核心思想是通过候选集生成和情节的向下封闭检测两个阶段来挖掘频繁项集。
  • 常用数据挖掘算法总结及Python实现.pdf常用数据挖掘算法总结及Python实现.pdf常用数据挖掘算法总结及Python实现.pdf常用数据挖掘算法总结及Python实现.pdf
  • 运用所学的数据挖掘应用知识,基于Python编程环境,设计文档内容包括:数据预处理、模型构建、代码实现、结果分析。包括源代码和设计文档
  • 自己写的数据挖掘 关联规则 Apriori算法 matlab实现 分了许多个文件 结构清晰
  • 精品文档可编辑 值得下载 基于HTML5的C4.5算法的可视化数据挖掘实现 引言为了使数据挖掘技术能满足不同层次的用户需要可视化数据挖掘技术被提出通过可视化的手段将数据挖掘过程的各个阶段展示给用户使用户能更好的...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 209,674
精华内容 83,869
关键字:

数据挖掘实现