数据挖掘——数据挖掘的起源

简介: 数据挖掘的定义还远没有达成一致,甚至没有定义出数据挖掘的构成。 数据挖掘起源于多种学科,其中最重要的是统计学和机器学习。

00568e864a8edb366aa7e53cb0922d5ff2f16a7b

数据挖掘的定义还远没有达成一致,甚至没有定义出数据挖掘的构成。


数据挖掘起源于多种学科,其中最重要的是统计学机器学习

统计学起源于数学其强调的是数学的精确性;

机器学习主要起源于计算机实践其更倾向于实践,主动检测某个东西,来确定它的表现形式。


统计学方法机器学习方法之间的主要区别之一是对数学性和形式化的重视程度不同,另外一个区别是模型和算法的相对重要性。


统计学强调的是模型,而机器学习强调的是算法。


数据挖掘中的基本建模法则起源于控制理论,控制理论主要应用于工程系统和工业过程。观察未知系统的输入输出信息,以确定其数学模型的过程通常叫做系统识别


系统识别的目标从数据挖掘的角度来看最重要的是预测系统的行为,解释系统变量之间的相互作用和关系


系统识别通常包括两个自上而下的步骤:

1. 结构识别—— 这一步要要应用目标系统的先验知识,来确定一类模型。再在这类模型中找出最适合的模型


2.参数识别——在第二步中,当模型的结构已知时,只需要应用优化技术来测定参数向量,使得所得模型能恰如其分的描述目标系统。


特别注意:系统识别不是一次性的过程,结构和参数识别都要重复进行,直到找到满意的模型为止。


如果事先对目标系统一无所知,结构识别就会很困难,而必须通过试错法来选择结构。


最后要区分“模型”与“模式"在数据挖掘中的概念

模型是一个大型结构或许总结了许多案例的关系;而模式是一个局部结构,只有少数案例或者很小的数据空间区域具备该结构。



目录
相关文章
|
机器学习/深度学习 算法 数据挖掘
统计学与Python:实现描述性统计和推断性统计分析
【4月更文挑战第12天】本文介绍了Python在统计学中的应用,重点讲解了如何使用Python进行描述性与推断性统计分析。Pandas和NumPy库用于描述性统计,提供数据概括和总结功能;Scipy和Statsmodels库支持推断性统计,包括假设检验和模型建立。通过数据导入、描述性统计量计算、图表绘制以及假设检验和回归分析等步骤,展示了Python实现统计分析的基本流程。持续学习和实践将有助于提升Python统计分析能力。
806 0
|
人工智能 弹性计算 算法
一文解读:阿里云AI基础设施的演进与挑战
对于如何更好地释放云上性能助力AIGC应用创新?“阿里云弹性计算为云上客户提供了ECS GPU DeepGPU增强工具包,帮助用户在云上高效地构建AI训练和AI推理基础设施,从而提高算力利用效率。”李鹏介绍到。目前,阿里云ECS DeepGPU已经帮助众多客户实现性能的大幅提升。其中,LLM微调训练场景下性能最高可提升80%,Stable Difussion推理场景下性能最高可提升60%。
126743 268
|
关系型数据库 Linux PostgreSQL
这个错误是因为Flink CDC在尝试访问PostgreSQL的"decoderbufs"文件时,发现该文件不存在
【1月更文挑战第23天】【1月更文挑战第111篇】这个错误是因为Flink CDC在尝试访问PostgreSQL的"decoderbufs"文件时,发现该文件不存在
447 11
|
存储 Nacos 数据库
在 Docker 中部署 Nacos 并挂载配置文件
在 Docker 中部署 Nacos 并挂载配置文件
|
存储 JSON iOS开发
Apple 的 plist 编辑器入门指南:基础操作与高级功能详解
PlistEdit Pro 是一款专为 macOS 编写的最高级属性列表 Plist 编辑器。对于 Mac 和 IOS 开发人员来说,编写应用程序时必须编辑各种列表文件。
|
边缘计算 缓存 运维
聚焦边缘计算场景,打造云边端一体化容器云平台
8月26日的2022亚太内容分发大会暨CDN峰会上,阿里云技术专家徐若晨受邀作客【边缘计算论坛】并发表了题为《边缘容器云平台的探索和实践》的精彩演讲。
1225 0
|
12月前
什么是多态?面向对象中对多态的理解
本文介绍了面向对象编程中的多态概念,包括其定义、优点以及编译时多态和运行时多态的具体实现方式。通过实例展示了函数重载、运算符重载、虚函数、接口和抽象类的应用,帮助读者深入理解多态的灵活性和可扩展性。
741 8
|
JavaScript Java 关系型数据库
基于SpringBoot的企业人力资源管理系统设计与实现
基于SpringBoot的企业人力资源管理系统设计与实现
667 0
|
消息中间件 设计模式 Java
聊聊 Kafka: Consumer 源码解析之 Rebalance 机制
聊聊 Kafka: Consumer 源码解析之 Rebalance 机制
795 0
|
数据可视化 数据管理 数据建模
CodeWave智能开发平台--02--目标:文档快速阅读--01快速构建一个应用
CodeWave智能开发平台--02--目标:文档快速阅读--01快速构建一个应用