Python实现PSO粒子群优化支持向量机回归模型(svr算法)项目实战

本文涉及的产品
模型训练 PAI-DLC,5000CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
交互式建模 PAI-DSW,每月250计算时 3个月
简介: Python实现PSO粒子群优化支持向量机回归模型(svr算法)项目实战

说明:这是一个机器学习实战项目(附带数据+代码+文档+视频讲解),如需数据+代码+文档+视频讲解可以直接到文章最后获取。

image.png

image.png

1.项目背景

在污水处理全过程中,为了更好地使解决后的水达到环保标准,在污水处理的每一个环节都是会用水质检测机器设备测量水体,依据水质检测机器设备测出的数据信息,选用相对应的处置方式,使本环节水质指标做到规定,再进到下一个解决环节。

本项目通过PSO粒子群优化支持向量机回归模型,进行水质检测。

2.数据获取

本次建模数据来源于网络(本项目撰写人整理而成),数据项统计如下

编号 

变量名称

描述

1

DATE

日期

2

BOD5_ET

5日生化需氧量

3

COD_ET

化学需氧量

4

TN_ET

总氮TN是水中各种形态无机和有机氮的总量

5

TP_ET

总磷TP是废水中以无机态和有机态存在的磷的总和

6

PH_ET

负责评价水中无机物含量的指标

7

NH4_N_ET

标签  氨氮是水体中的营养素,可导致水富营养化现象产生,是水体中的主要耗氧污染物,对鱼类及某些水生生物有毒害。

数据详情如下(部分展示):

image.png

3.数据预处理

3.1 用Pandas工具查看数据

使用Pandas工具的head()方法查看前五行数据:

image.png

关键代码:

image.png

3.2数据缺失查看

使用Pandas工具的info()方法查看数据信息:

image.png

从上图可以看到,总共有7个变量,数据中无缺失值,共705条数据。

关键代码:

image.png

 

3.3数据描述性统计

通过Pandas工具的describe()方法来查看数据的平均值、标准差、最小值、分位数、最大值。

image.png

关键代码如下:

image.png

4.探索性数据分析

4.1 氨氮NH4_N_ET变量的折线图

用Matplotlib工具的plot()方法绘制折线图:

image.png

4.2 PH_ET变量箱型图

用Pandas工具的plot(kind=‘box)方法绘制柱状图:

image.png

从上图可以看出,PH值均值在7.8左右。

4.3 总氮与氨氮的散点图与拟合线

seaborn工具的lmplot ()方法绘制散点图与拟合线:

 

image.png

从上图可以看出,总氮和氨氮存在一定的线性关系。

4.4 相关性分析

image.png

从上图中可以看到,数值越大相关性越强,正值是正相关、负值是负相关。PH_ET和标签NH4_N_ET相关性非常弱,在后续特征工程中可以考虑去掉此特征变量。

5.特征工程

5.1 建立特征数据和标签数据

关键代码如下:

image.png

5.2 数据集拆分

通过train_test_split()方法按照80%训练集、20%测试集进行划分,关键代码如下:

image.png

6.构建PSO粒子群算法优化支持向量机回归模型

粒子群优化算法(PSO:Particle swarm optimization) 是一种进化计算技术(evolutionary computation)。源于对鸟群捕食的行为研究。粒子群优化算法的基本思想:是通过群体中个体之间的协作和信息共享来寻找最优解

主要使用PSO粒子群优化SVR算法,用于目标回归。  

6.1默认参数构建模型

编号

模型名称

参数

1

支持向量机回归模型

C=0.1

2

epsilon=0.1

 

模型名称

指标名称

指标值

测试集

支持向量机回归模型

可解释方差值

0.5971

平均绝对误差

3.3093

均方误差

35.574

R方

0.595

 

6.2 PSO粒子群寻找的最优参数

关键代码:

image.png

 

最优参数:

 

image.png

6.3 最优参数值构建模型 

编号

模型名称

参数

1

支持向量机回归模型

C=14.273117157277268

2

epsilon=0.1325024020733341

 

7.模型评估

7.1评估指标及结果  

评估指标主要包括可解释方差值、平均绝对误差、均方误差、R方值等等。

模型名称

指标名称

指标值

测试集

支持向量机回归模型

可解释方差值

0.6777

平均绝对误差

2.6076

均方误差

28.5315

R方

0.6752

从上表可以看出,R方0.6752 较默认参数优提升;可解释方差值0.6777 较默认参数优提升,优化后的回归模型效果良好,大家可以基于这个基础上增加粒子群迭代次数等进行调优,我这里的模型评估值为迭代1次的评估值,一般都要迭代100次到1000次,所以大家实际应用时根据需要修改参数值即可。

关键代码如下:

image.png

7.2 真实值与预测值对比图

image.png

从上图可以看出真实值和预测值波动基本一致,模型拟合效果良好。

8.结论与展望

综上所述,本文采用了PSO粒子群优化算法寻找支持向量机SVR算法的最优参数值来构建回归模型,最终证明了我们提出的模型效果良好。此模型可用于日常产品的预测。

# 本次机器学习项目实战所需的资料,项目资源如下:
 
# 项目说明:
 
# 获取方式一:
 
# 项目实战合集导航:
 
https://docs.qq.com/sheet/DTVd0Y2NNQUlWcmd6?tab=BB08J2
 
# 获取方式二:
 
链接:https://pan.baidu.com/s/1QkxLqT53mUqfLg9KPbBB6g 
提取码:s4mf
相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
相关文章
|
8天前
|
机器学习/深度学习 数据采集 TensorFlow
使用Python实现智能食品市场预测的深度学习模型
使用Python实现智能食品市场预测的深度学习模型
46 5
|
1天前
|
机器学习/深度学习 数据采集 供应链
使用Python实现智能食品安全追溯系统的深度学习模型
使用Python实现智能食品安全追溯系统的深度学习模型
16 4
|
5天前
|
机器学习/深度学习 数据采集 供应链
使用Python实现智能食品价格预测的深度学习模型
使用Python实现智能食品价格预测的深度学习模型
29 6
|
6天前
|
机器学习/深度学习 数据采集 搜索推荐
使用Python实现智能食品推荐系统的深度学习模型
使用Python实现智能食品推荐系统的深度学习模型
23 2
|
9天前
|
机器学习/深度学习 人工智能 算法
【手写数字识别】Python+深度学习+机器学习+人工智能+TensorFlow+算法模型
手写数字识别系统,使用Python作为主要开发语言,基于深度学习TensorFlow框架,搭建卷积神经网络算法。并通过对数据集进行训练,最后得到一个识别精度较高的模型。并基于Flask框架,开发网页端操作平台,实现用户上传一张图片识别其名称。
30 0
【手写数字识别】Python+深度学习+机器学习+人工智能+TensorFlow+算法模型
|
9天前
|
机器学习/深度学习 人工智能 算法
基于深度学习的【蔬菜识别】系统实现~Python+人工智能+TensorFlow+算法模型
蔬菜识别系统,本系统使用Python作为主要编程语言,通过收集了8种常见的蔬菜图像数据集('土豆', '大白菜', '大葱', '莲藕', '菠菜', '西红柿', '韭菜', '黄瓜'),然后基于TensorFlow搭建卷积神经网络算法模型,通过多轮迭代训练最后得到一个识别精度较高的模型文件。在使用Django开发web网页端操作界面,实现用户上传一张蔬菜图片识别其名称。
47 0
基于深度学习的【蔬菜识别】系统实现~Python+人工智能+TensorFlow+算法模型
|
7天前
|
机器学习/深度学习 数据采集 TensorFlow
使用Python实现智能食品广告投放优化的深度学习模型
使用Python实现智能食品广告投放优化的深度学习模型
20 0
|
29天前
|
算法 安全 数据安全/隐私保护
基于game-based算法的动态频谱访问matlab仿真
本算法展示了在认知无线电网络中,通过游戏理论优化动态频谱访问,提高频谱利用率和物理层安全性。程序运行效果包括负载因子、传输功率、信噪比对用户效用和保密率的影响分析。软件版本:Matlab 2022a。完整代码包含详细中文注释和操作视频。
|
6天前
|
算法 数据安全/隐私保护 索引
OFDM系统PAPR算法的MATLAB仿真,对比SLM,PTS以及CAF,对比不同傅里叶变换长度
本项目展示了在MATLAB 2022a环境下,通过选择映射(SLM)与相位截断星座图(PTS)技术有效降低OFDM系统中PAPR的算法实现。包括无水印的算法运行效果预览、核心程序及详尽的中文注释,附带操作步骤视频,适合研究与教学使用。
|
14天前
|
算法 数据挖掘 数据安全/隐私保护
基于FCM模糊聚类算法的图像分割matlab仿真
本项目展示了基于模糊C均值(FCM)算法的图像分割技术。算法运行效果良好,无水印。使用MATLAB 2022a开发,提供完整代码及中文注释,附带操作步骤视频。FCM算法通过隶属度矩阵和聚类中心矩阵实现图像分割,适用于灰度和彩色图像,广泛应用于医学影像、遥感图像等领域。
下一篇
无影云桌面