数据挖掘最常见的十种方法赵哲丽

下面介绍十种数据挖掘(DataMining)的分析方法,以便于大家对模型的初步了解,这些都是日常挖掘中经常遇到的算法,希望对大家有用!(甚至有数据挖掘公司,用其中的一种算法就能独步天下)

1、基于历史的MBR分析(Memory-BasedReasoning;MBR)

基于历史的MBR分析方法最主要的概念是用已知的案例(case)来预测未来案例的一些属性(attribute),通常找寻最相似的案例来做比较。

记忆基础推理法中有两个主要的要素,分别为距离函数(distancefunction)与结合函数(combinationfunction)。距离函数的用意在找出最相似的案例;结合函数则将相似案例的属性结合起来,以供预测之用。记忆基础推理法的优点是它容许各种型态的数据,这些数据不需服从某些假设。另一个优点是其具备学习能力,它能藉由旧案例的学习来获取关于新案例的知识。较令人诟病的是它需要大量的历史数据,有足够的历史数据方能做良好的预测。此外记忆基础推理法在处理上亦较为费时,不易发现最佳的距离函数与结合函数。其可应用的范围包括欺骗行为的侦测、客户反应预测、医学诊疗、反应的归类等方面。

2、购物篮分析(MarketBasketAnalysis)

购物篮分析基本运作过程包含下列三点:

(1)选择正确的品项:这里所指的正确乃是针对企业体而言,必须要在数以百计、千计品项中选择出真正有用的品项出来。

(2)经由对共同发生矩阵(co-occurrencematrix)的探讨挖掘出联想规则。

购物篮分析技术可以应用在下列问题上:

(1)针对信用卡购物,能够预测未来顾客可能购买什么。

(2)对于电信与金融服务业而言,经由购物篮分析能够设计不同的服务组合以扩大利润。

(3)保险业能藉由购物篮分析侦测出可能不寻常的投保组合并作预防。

(4)对病人而言,在疗程的组合上,购物篮分析能作为是否这些疗程组合会导致并发症的判断依据。

3、决策树(DecisionTrees)

决策树在解决归类与预测上有着极强的能力,它以法则的方式表达,而这些法则则以一连串的问题表示出来,经由不断询问问题最终能导出所需的结果。典型的决策树顶端是一个树根,底部有许多的树叶,它将纪录分解成不同的子集,每个子集中的字段可能都包含一个简单的法则。此外,决策树可能有着不同的外型,例如二元树、三元树或混和的决策树型态。

4、遗传算法(GeneticAlgorithm)

遗传算法学习细胞演化的过程,细胞间可经由不断的选择、复制、交配、突变产生更佳的新细胞。基因算法的运作方式也很类似,它必须预先建立好一个模式,再经由一连串类似产生新细胞过程的运作,利用适合函数(fitnessfunction)决定所产生的后代是否与这个模式吻合,最后仅有最吻合的结果能够存活,这个程序一直运作直到此函数收敛到最佳解。基因算法在群集(cluster)问题上有不错的表现,一般可用来辅助记忆基础推理法与类神经网络的应用。

5、聚类分析(ClusterDetection)

这个技术涵盖范围相当广泛,包含基因算法、类神经网络、统计学中的群集分析都有这个功能。它的目标为找出数据中以前未知的相似群体,在许许多多的分析中,刚开始都运用到群集侦测技术,以作为研究的开端。

6、连接分析(LinkAnalysis)

7、OLAP分析(On-LineAnalyticProcessing;OLAP)

严格说起来,OLAP分析并不算特别的一个数据挖掘技术,但是透过在线分析处理工具,使用者能更清楚的了解数据所隐藏的潜在意涵。如同一些视觉处理技术一般,透过图表或图形等方式显现,对一般人而言,感觉会更友善。这样的工具亦能辅助将数据转变成信息的目标。

8、神经网络(NeuralNetworks)

9、判别分析(DiscriminantAnalysis)

当所遭遇问题它的因变量为定性(categorical),而自变量(预测变量)为定量(metric)时,判别分析为一非常适当之技术,通常应用在解决分类的问题上面。若因变量由两个群体所构成,称之为双群体—判别分析(Two-GroupDiscriminantAnalysis);若由多个群体构成,则称之为多元判别分析(MultipleDiscriminantAnalysis;MDA)。

(2)检定各组的重心是否有差异。

(3)找出哪些预测变量具有最大的区别能力。

(4)根据新受试者的预测变量数值,将该受试者指派到某一群体。

10、罗吉斯回归分析(LogisticAnalysis)

当判别分析中群体不符合正态分布假设时,罗吉斯回归分析是一个很好的替代方法。罗吉斯回归分析并非预测事件(event)是否发生,而是预测该事件的机率。它将自变量与因变量的关系假定是S行的形状,当自变量很小时,机率值接近为零;当自变量值慢慢增加时,机率值沿着曲线增加,增加到一定程度时,曲线协率开始减小,故机率值介于0与1之间。

THE END
1.数据挖掘的主要技术和应用数据挖掘(Data Mining)是一种利用统计学、机器学习、数据库、算法等方法从大量数据中发现隐藏的模式、规律和知识的科学。数据挖掘技术广泛应用于商业、金融、医疗、科学等领域,为决策提供有价值的信息和洞察,提高了企业的竞争力和效率。 在本文中,我们将从以下几个方面进行阐述: https://blog.csdn.net/universsky2015/article/details/137300243
2.数据挖掘主要技术有哪些?新手必看!数据挖掘主要技术有哪些?新手必看! 数据挖掘主要技术包括统计学、聚类分析、决策树分类技术、人工神经网络。 1、统计学虽然是一门“古老的”学科,但它依然是最基本的数据挖掘技术,特别是多元统计分析,如判别分析、主成分分析、因子分析、相关分析、多元回归分析等。https://zhuanlan.zhihu.com/p/532097299
3.数据挖掘设计的技术有哪些帆软数字化转型知识库数据挖掘设计的技术有哪些 数据挖掘设计中常用的技术有分类、回归、聚类、关联规则和降维等。分类技术通过已知类别的数据集来训练模型,以便预测未知数据的类别;回归技术用于预测连续变量的数值;聚类技术将数据分组,使得同一组内的数据相似度较高,组间差异较大;关联规则技术用于发现数据项之间的有趣关系;降维技术通过减少https://www.fanruan.com/blog/article/583196/
4.数据挖掘的技术都有哪些?数据挖掘的技术都有哪些? 如果我们学习数据分析,那么肯定少不了也要好好学习一下数据挖掘。我们都知道,要想掌握好数据挖掘就需要掌握很多的相关技术。一般来说,数据挖掘工作的技术有关联规则、分类、聚类、决策树、序列模式,下面我们就给大家讲述一下这些知识。https://www.cda.cn/view/26917.html
5.数据挖掘技术主要包括哪些?数据挖掘的技术,可分为:统计方法、机器学习方法、神经网络方法和数据库方法。统计方法,可细分为:回归https://m.imooc.com/wenda/detail/508957
6.数据挖掘有哪些功能导读随着大数据发展越来越好,数据挖掘成为了未来发展的一大趋势,数据挖掘和分析技术在各行业发挥着重要作用,小编为大家整理了数据挖掘的具体功能介绍,一起来看看吧。 数据挖掘有哪些功能: 数据挖掘通过预测未来趋势及行为,做出前摄的、基于知识的决策。数据挖掘的目标是从数据库中发现隐含的、有意义的知识,主要有以下五https://www.baijiao.org/school/zhengzhouxinyingdajiaoyu/news/14499.html
7.数据仓库系统的技术有哪些数据仓库系统的技术主要包括ETL(抽取、转换、加载)、数据建模、数据挖掘和OLAP多维分析。ETL用于数据的提取、清洗和加载;数据建模用于设计数据仓库的结构;数据挖掘用于发现数据中的模式和趋势;OLAP多维分析用于对数据进行多维度的分析和查询。 数据仓库系统的技术有哪些 https://h.chanjet.com/ask/7690e15a41ff9.html
8.数据统计分析和数据挖掘有何区别?大数据CIO时代网摘要:从实践应用角度来看,这个问题并没有很大的意义,正如“不管黑猫白猫,抓住老鼠才是好猫”一样,在企业的商业实战中,数据分析分析问题、解决问题时,首先考虑的是思路,其次才会对与思路匹配的分析挖掘技术进行筛选,而不是先考虑到底是用统计技术还是用数据挖掘技术来解决这个问题。 https://www.ciotimes.com/bigdata/158710.html
9.大数据挖掘主要涉及哪些技术?大数据挖掘主要涉及的技术有以下几种:1、决策树学习技术;2、分类技术;3、聚类分析技术;4、粗糙集技术;5、回归分析技术;6、关联规则技术;7、特征分析技术;8、神经网络技术;9、遗传算法技术。 1、决策树学习技术 决策树学习是一种通过逼近离散值目标函数的方法,通过把实例从根节点排列到某个叶子节点来分类实例,叶https://www.linkflowtech.com/news/1988
10.商务智能包括哪些技术商务智能包括哪些技术 商务智能这一术语1989年由Gartner Group的Howard Dresner首次提出,它描述了一系列的概念和方法,通过应用基于事实的支持系统来辅助商业决策的制定。商务智能包括的技术有:1、数据仓库;2、数据挖掘;3、数据集成和存储管理;4、数据分析和建模;5、联机分析处理(OLAP)。https://36kr.com/p/1497099355715712
11.一文回顾近二十年数据科学领域的里程碑事件或突破性技术总之,“大数据”和“数据科学”成为了当前最流行的词汇之一。那么,在进入21世纪后迅速发展的短短二十年中,数据科学领域有哪些里程碑事件或突破性技术值得铭记呢?下面让我们来一一盘点。 一、2001年 1.数据挖掘 数据挖掘其实是一个逐渐演变的过程。电子数据处理的初期,人们就试图通过某些方法来实现自动决策支持,当时https://maimai.cn/article/detail?fid=1446221264&efid=1yTum-SWXEP826HTaiNUkA
12.数据挖掘的技术有很多种,按照不同的分类有不同的分类法数据挖掘的技术有很多种,根据不同的分类有不同的分类方法。以下是数据挖掘中常用的一些技术:统计技术、相关规则、基于历史分析、遗传算法、聚集检测、连接分析、决策树、神经网络、粗糙集、模糊集、回归分析、差异分析、概念描述等13种常用的数据挖掘技术。 https://www.tulingxueyuan.cn/tlzx/jsp/1626.html