Py之imblearn:imblearn/imbalanced-learn库的简介、安装、使用方法之详细攻略

简介: Py之imblearn:imblearn/imbalanced-learn库的简介、安装、使用方法之详细攻略

imblearn/imbalanced-learn库的简介


       imblearn/imbalanced-learn是一个python包,它提供了许多重采样技术,常用于显示强烈类间不平衡的数据集中。它与scikit learn兼容,是 scikit-learn-contrib 项目的一部分。


在python3.6+下测试了imbalanced-learn。依赖性要求基于上一个scikit学习版本:


scipy(>=0.19.1)

numpy(>=1.13.3)

scikit-learn(>=0.22)

joblib(>=0.11)

keras 2 (optional)

tensorflow (optional)




imblearn/imbalanced-learn库的安装


pip install imblearn

pip install imbalanced-learn

pip install -U imbalanced-learn

conda install -c conda-forge imbalanced-learn


image.png




imblearn/imbalanced-learn库的使用方法


        大多数分类算法只有在每个类的样本数量大致相同的情况下才能达到最优。高度倾斜的数据集,其中少数被一个或多个类大大超过,已经证明是一个挑战,但同时变得越来越普遍。

解决这个问题的一种方法是通过重新采样数据集来抵消这种不平衡,希望得到一个比其他方法更健壮和公平的决策边界。


Re-sampling techniques are divided in two categories:


Under-sampling the majority class(es).

Over-sampling the minority class.

Combining over- and under-sampling.

Create ensemble balanced sets.

Below is a list of the methods currently implemented in this module.


Under-sampling


Random majority under-sampling with replacement

Extraction of majority-minority Tomek links [1]

Under-sampling with Cluster Centroids

NearMiss-(1 & 2 & 3) [2]

Condensed Nearest Neighbour [3]

One-Sided Selection [4]

Neighboorhood Cleaning Rule [5]

Edited Nearest Neighbours [6]

Instance Hardness Threshold [7]

Repeated Edited Nearest Neighbours [14]

AllKNN [14]

Over-sampling


Random minority over-sampling with replacement

SMOTE - Synthetic Minority Over-sampling Technique [8]

SMOTENC - SMOTE for Nominal Continuous [8]

bSMOTE(1 & 2) - Borderline SMOTE of types 1 and 2 [9]

SVM SMOTE - Support Vectors SMOTE [10]

ADASYN - Adaptive synthetic sampling approach for imbalanced learning [15]

KMeans-SMOTE [17]

Over-sampling followed by under-sampling


SMOTE + Tomek links [12]

SMOTE + ENN [11]

Ensemble classifier using samplers internally


Easy Ensemble classifier [13]

Balanced Random Forest [16]

Balanced Bagging

RUSBoost [18]

Mini-batch resampling for Keras and Tensorflow

 


相关文章
|
机器学习/深度学习 Python
Py之yacs:yacs的简介、安装、使用方法之详细攻略
Py之yacs:yacs的简介、安装、使用方法之详细攻略
Py之yacs:yacs的简介、安装、使用方法之详细攻略
|
XML JSON JavaScript
Py之demjson:Python库之demjson的简介、安装、使用方法详细攻略
Py之demjson:Python库之demjson的简介、安装、使用方法详细攻略
Py之demjson:Python库之demjson的简介、安装、使用方法详细攻略
|
机器学习/深度学习 Python
Py之lime:lime库的简介、安装、使用方法之详细攻略
Py之lime:lime库的简介、安装、使用方法之详细攻略
Py之lime:lime库的简介、安装、使用方法之详细攻略
|
机器学习/深度学习 算法 TensorFlow
Py之imblearn:imblearn/imbalanced-learn库的简介、安装、使用方法之详细攻略
Py之imblearn:imblearn/imbalanced-learn库的简介、安装、使用方法之详细攻略
Py之imblearn:imblearn/imbalanced-learn库的简介、安装、使用方法之详细攻略
|
人工智能 PyTorch 测试技术
Py之fvcore:fvcore库的简介、安装、使用方法之详细攻略
Py之fvcore:fvcore库的简介、安装、使用方法之详细攻略
Py之fvcore:fvcore库的简介、安装、使用方法之详细攻略
|
JSON 数据格式 Python
Py之simplejson:simplejson库的简介、安装、使用方法之详细攻略
Py之simplejson:simplejson库的简介、安装、使用方法之详细攻略
Py之simplejson:simplejson库的简介、安装、使用方法之详细攻略
Py之cvxopt:cvxopt库的简介、安装、使用方法之详细攻略
Py之cvxopt:cvxopt库的简介、安装、使用方法之详细攻略
Py之cvxopt:cvxopt库的简介、安装、使用方法之详细攻略
|
数据采集 算法 数据可视化
Py之Optbinning:Optbinning的简介、安装、使用方法之详细攻略
Py之Optbinning:Optbinning的简介、安装、使用方法之详细攻略
Py之Optbinning:Optbinning的简介、安装、使用方法之详细攻略
|
Unix Linux API
Py之portalocker:portalocker的简介、安装、使用方法之详细攻略
Py之portalocker:portalocker的简介、安装、使用方法之详细攻略
Py之portalocker:portalocker的简介、安装、使用方法之详细攻略
|
机器学习/深度学习 存储 人工智能
Py之GraphLab:graphlab库的简介、安装、使用方法之详细攻略
Py之GraphLab:graphlab库的简介、安装、使用方法之详细攻略