sklearn相关3

本文涉及的产品
模型训练 PAI-DLC,5000CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
交互式建模 PAI-DSW,每月250计算时 3个月
简介: sklearn介绍

核心API
估计器 fit()
任何可以基于数据集对一些参数进行估计的对象都被称为估计器
两个核心点:1.需要输入数据,2.可以估计参数。估计器首先被创建,然后被拟合。
预测器 predict() | score()
预测器在估计器上延展出预测功能
两个核心点:1.基于学到的参数预测,2.预测有很多指标。最常见的就是predict()函数
model.predict(X_test):评估模型在新数据上的表现
model.predict(X_train):确定模型在老数据上的表现
装换器
装换器也是一种估计器,两者都带有拟合功能,但估计器做完拟合来预测,而装换器做完拟合来装换
核心点:估计器里fit+predict,装换器里先创建再fit+再transform
警示: fit() 函数只能作用在训练集上,千万不要作用在测试集上,要不然你就犯了数据窥探的错误了!拿标准化举例,用训练集 fit 出来的均值和标准差参数,来对测试集做标准化。

分类:
1.将分类型变量编码成数值型变量
2.规范化或标准化数值型变量
分类型变量编码
LableEncoder和OrdinalEncoder将字符装成数字,LableEncoder的输入是一维,OrdinalEncoder的输入是二维
↑ 存在的问题:机器学习算法会认为两个临近值比两个疏远值更相似,解决办法是给每个分类创建一个二元属性,即独热编码OneHotEncoder
OneHotEncoder其实是把一个整数用向量的形式表现,接受的两种类型的输入:1.用LableEncoder编码好的一维数组,2.DataFrame

规范化normalization:每个维度的特征减去该特征的最小值,除以该特征的最大值与最小值之差
标准化standardization:每个维度的特征减去该特征均值,除以该维度的标准差

用 LabelEncoder 编码好的一维数组 (元素为整数),重塑 (用 reshape(-1,1)) 成二维数组作为 OneHotEncoder 输入

高级API
高级API接口是元估计器(meta-estimator),即由很多基估计器(base estimator)组合成的估计器
带集成功能的 ensemble
多分类和多标签的 multiclass
多输出的 multioutput
选择模型的 model_selection
流水线的 pipeline
image.png

目录
相关文章
|
6月前
|
机器学习/深度学习 算法 数据挖掘
sklearn-决策树
sklearn-决策树
67 0
|
6月前
|
算法
sklearn算法
sklearn算法
48 0
|
机器学习/深度学习 算法 计算机视觉
使用sklearn进行特征选择
背景 一个典型的机器学习任务,是通过样本的特征来预测样本所对应的值。如果样本的特征少,我们会考虑增加特征。而现实中的情况往往是特征太多了,需要减少一些特征。
|
4月前
|
机器学习/深度学习 算法 数据挖掘
sklearn
【7月更文挑战第26天】
68 10
|
数据挖掘
Sklearn介绍1
Sklearn介绍
149 0
|
API Python
Sklearn介绍3
Sklearn介绍
102 0
|
机器学习/深度学习
Sklearn介绍2
Sklearn介绍
76 0
|
机器学习/深度学习 算法
sklearn集成学习之VotingClassifier
sklearn集成学习之VotingClassifier
sklearn集成学习之VotingClassifier
|
机器学习/深度学习 数据采集 资源调度
浅析sklearn中的数据预处理方法
在日常的机器学习开发过程中,基本的机器学习过程如下图所示。
|
机器学习/深度学习 算法 数据挖掘
临行在即,分享一个自己写的sklearn源码库
考虑接下来一段时间会出差在外,现将自己近1个月来学习ML算法的一点成果做以分享,相关源码纯干货版本已上传至GitHub,有需要者可通过"阅读原文"连接自行clone
238 0
临行在即,分享一个自己写的sklearn源码库

热门文章

最新文章