Python实现PSO粒子群优化支持向量机回归模型(svr算法)项目实战

本文涉及的产品
交互式建模 PAI-DSW,5000CU*H 3个月
模型训练 PAI-DLC,5000CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: Python实现PSO粒子群优化支持向量机回归模型(svr算法)项目实战

说明:这是一个机器学习实战项目(附带数据+代码+文档+视频讲解),如需数据+代码+文档+视频讲解可以直接到文章最后获取。

image.png

image.png

1.项目背景

在污水处理全过程中,为了更好地使解决后的水达到环保标准,在污水处理的每一个环节都是会用水质检测机器设备测量水体,依据水质检测机器设备测出的数据信息,选用相对应的处置方式,使本环节水质指标做到规定,再进到下一个解决环节。

本项目通过PSO粒子群优化支持向量机回归模型,进行水质检测。

2.数据获取

本次建模数据来源于网络(本项目撰写人整理而成),数据项统计如下

编号 

变量名称

描述

1

DATE

日期

2

BOD5_ET

5日生化需氧量

3

COD_ET

化学需氧量

4

TN_ET

总氮TN是水中各种形态无机和有机氮的总量

5

TP_ET

总磷TP是废水中以无机态和有机态存在的磷的总和

6

PH_ET

负责评价水中无机物含量的指标

7

NH4_N_ET

标签  氨氮是水体中的营养素,可导致水富营养化现象产生,是水体中的主要耗氧污染物,对鱼类及某些水生生物有毒害。

数据详情如下(部分展示):

image.png

3.数据预处理

3.1 用Pandas工具查看数据

使用Pandas工具的head()方法查看前五行数据:

image.png

关键代码:

image.png

3.2数据缺失查看

使用Pandas工具的info()方法查看数据信息:

image.png

从上图可以看到,总共有7个变量,数据中无缺失值,共705条数据。

关键代码:

image.png

 

3.3数据描述性统计

通过Pandas工具的describe()方法来查看数据的平均值、标准差、最小值、分位数、最大值。

image.png

关键代码如下:

image.png

4.探索性数据分析

4.1 氨氮NH4_N_ET变量的折线图

用Matplotlib工具的plot()方法绘制折线图:

image.png

4.2 PH_ET变量箱型图

用Pandas工具的plot(kind=‘box)方法绘制柱状图:

image.png

从上图可以看出,PH值均值在7.8左右。

4.3 总氮与氨氮的散点图与拟合线

seaborn工具的lmplot ()方法绘制散点图与拟合线:

 

image.png

从上图可以看出,总氮和氨氮存在一定的线性关系。

4.4 相关性分析

image.png

从上图中可以看到,数值越大相关性越强,正值是正相关、负值是负相关。PH_ET和标签NH4_N_ET相关性非常弱,在后续特征工程中可以考虑去掉此特征变量。

5.特征工程

5.1 建立特征数据和标签数据

关键代码如下:

image.png

5.2 数据集拆分

通过train_test_split()方法按照80%训练集、20%测试集进行划分,关键代码如下:

image.png

6.构建PSO粒子群算法优化支持向量机回归模型

粒子群优化算法(PSO:Particle swarm optimization) 是一种进化计算技术(evolutionary computation)。源于对鸟群捕食的行为研究。粒子群优化算法的基本思想:是通过群体中个体之间的协作和信息共享来寻找最优解

主要使用PSO粒子群优化SVR算法,用于目标回归。  

6.1默认参数构建模型

编号

模型名称

参数

1

支持向量机回归模型

C=0.1

2

epsilon=0.1

 

模型名称

指标名称

指标值

测试集

支持向量机回归模型

可解释方差值

0.5971

平均绝对误差

3.3093

均方误差

35.574

R方

0.595

 

6.2 PSO粒子群寻找的最优参数

关键代码:

image.png

 

最优参数:

 

image.png

6.3 最优参数值构建模型 

编号

模型名称

参数

1

支持向量机回归模型

C=14.273117157277268

2

epsilon=0.1325024020733341

 

7.模型评估

7.1评估指标及结果  

评估指标主要包括可解释方差值、平均绝对误差、均方误差、R方值等等。

模型名称

指标名称

指标值

测试集

支持向量机回归模型

可解释方差值

0.6777

平均绝对误差

2.6076

均方误差

28.5315

R方

0.6752

从上表可以看出,R方0.6752 较默认参数优提升;可解释方差值0.6777 较默认参数优提升,优化后的回归模型效果良好,大家可以基于这个基础上增加粒子群迭代次数等进行调优,我这里的模型评估值为迭代1次的评估值,一般都要迭代100次到1000次,所以大家实际应用时根据需要修改参数值即可。

关键代码如下:

image.png

7.2 真实值与预测值对比图

image.png

从上图可以看出真实值和预测值波动基本一致,模型拟合效果良好。

8.结论与展望

综上所述,本文采用了PSO粒子群优化算法寻找支持向量机SVR算法的最优参数值来构建回归模型,最终证明了我们提出的模型效果良好。此模型可用于日常产品的预测。

# 本次机器学习项目实战所需的资料,项目资源如下:
 
# 项目说明:
 
# 获取方式一:
 
# 项目实战合集导航:
 
https://docs.qq.com/sheet/DTVd0Y2NNQUlWcmd6?tab=BB08J2
 
# 获取方式二:
 
链接:https://pan.baidu.com/s/1QkxLqT53mUqfLg9KPbBB6g 
提取码:s4mf
相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
相关文章
|
4天前
|
机器学习/深度学习 数据采集 数据可视化
使用Python实现深度学习模型:智能舆情监测与分析
【8月更文挑战第16天】 使用Python实现深度学习模型:智能舆情监测与分析
18 1
|
6天前
|
机器学习/深度学习 传感器 自动驾驶
使用Python实现深度学习模型:智能车联网与自动驾驶
【8月更文挑战第14天】 使用Python实现深度学习模型:智能车联网与自动驾驶
26 10
|
3天前
|
机器学习/深度学习 JSON API
【Python奇迹】FastAPI框架大显神通:一键部署机器学习模型,让数据预测飞跃至Web舞台,震撼开启智能服务新纪元!
【8月更文挑战第16天】在数据驱动的时代,高效部署机器学习模型至关重要。FastAPI凭借其高性能与灵活性,成为搭建模型API的理想选择。本文详述了从环境准备、模型训练到使用FastAPI部署的全过程。首先,确保安装了Python及相关库(fastapi、uvicorn、scikit-learn)。接着,以线性回归为例,构建了一个预测房价的模型。通过定义FastAPI端点,实现了基于房屋大小预测价格的功能,并介绍了如何运行服务器及测试API。最终,用户可通过HTTP请求获取预测结果,极大地提升了模型的实用性和集成性。
13 1
|
6天前
|
算法 Ubuntu 机器人
DRAKE - 基于模型的机器人设计与验证 由丰田研究所支持的 C++ / Python 工具箱。
DRAKE - 基于模型的机器人设计与验证 由丰田研究所支持的 C++ / Python 工具箱。
15 1
|
1天前
|
机器学习/深度学习 数据采集 数据可视化
使用Python实现深度学习模型:智能娱乐与虚拟现实技术
【8月更文挑战第18天】 使用Python实现深度学习模型:智能娱乐与虚拟现实技术
5 0
|
2天前
|
机器学习/深度学习 数据采集 数据可视化
使用Python实现深度学习模型:智能城市交通管控与优化
【8月更文挑战第17天】 使用Python实现深度学习模型:智能城市交通管控与优化
3 0
|
5天前
|
机器学习/深度学习 传感器 数据采集
使用Python实现深度学习模型:智能工业与工业4.0技术
【8月更文挑战第15天】 使用Python实现深度学习模型:智能工业与工业4.0技术
15 0
|
6天前
|
算法
基于模糊控制算法的倒立摆控制系统matlab仿真
本项目构建了一个基于模糊控制算法的倒立摆控制系统,利用MATLAB 2022a实现了从不稳定到稳定状态的转变,并输出了相应的动画和收敛过程。模糊控制器通过对小车位置与摆的角度误差及其变化量进行模糊化处理,依据预设的模糊规则库进行模糊推理并最终去模糊化为精确的控制量,成功地使倒立摆维持在直立位置。该方法无需精确数学模型,适用于处理系统的非线性和不确定性。
基于模糊控制算法的倒立摆控制系统matlab仿真
|
5天前
|
机器学习/深度学习 算法 定位技术
MATLAB - 遗传算法(GA)求解旅行商问题(TSP)
MATLAB - 遗传算法(GA)求解旅行商问题(TSP)
12 3
|
7天前
|
算法
基于多路径路由的全局感知网络流量分配优化算法matlab仿真
本文提出一种全局感知网络流量分配优化算法,针对现代网络中多路径路由的需求,旨在均衡分配流量、减轻拥塞并提升吞吐量。算法基于网络模型G(N, M),包含N节点与M连接,并考虑K种不同优先级的流量。通过迭代调整每种流量在各路径上的分配比例,依据带宽利用率um=Σ(xm,k * dk) / cm来优化网络性能,确保高优先级流量的有效传输同时最大化利用网络资源。算法设定收敛条件以避免陷入局部最优解。