数据分享|函数型数据分析部分省市新冠疫情数据

简介: 数据分享|函数型数据分析部分省市新冠疫情数据

全文链接:http://tecdat.cn/?p=28716

作者:Mingji Tang


统计学中传统的数据类型有截面数据和时间序列数据。这两者都只能在某一纵向或横向上探究数据,且部分前提条件又很难满足。而函数型数据连续型函数与离散型函数长期以来的分离状态,实现了离散和连续的过度。它很少依赖于模型构建及假设条件。通过使用函数型数据,我们可以发掘新冠疫情数据中更多的信息。


一、数据的收集与整理


选择人口流动较大的北京、上海、广东,以及与武汉相邻的重庆、湖南、江西、安徽、河南,一共八个省级行政区的确诊人数变化数据查看文末了解数据免费获取方式作为样本。

考虑到各省市人口数量差异较大,使用确诊人数和总人数的比例作为数据研究对象更加合理。

二、  建立函数型数据对象


采用B样条基线性函数拟合离散的数据。使用最小二乘法得到系数。

然后通过粗糙惩罚来提高函数的光滑性。设置惩罚项为

则新的需要最小化的式子为:

可以得到光滑化之后的函数型数据。

点击标题查阅往期内容


Python用RNN神经网络:LSTM、GRU、回归和ARIMA对COVID19新冠疫情人数时间序列预测


01

02

03

04


三、  函数型数据描述


得到数据之后可以计算数据的均值,方差,协方差,以及研究二次导数和导数的关系可以得到相位图。


四、函数型数据主成分分析


模仿传统数据的主成分分析,可以找到离散型数据的主成分分析方法。权函数满足

某一数据关于这个权函数的得分记为

我们寻找第一个权函数为

后面的权函数为

项目结果


以上分别为函数型数据的均值,方差,协方差以及相位图。(其中粗线部分是由均值绘制的相位图。)疫情的发展可以看作一个由平稳态逐渐发展为不平稳态,最后再回到平稳态的过程。相位图中,我们通常把加速度称为势能,而把速度称为动能。在第一象限阶段,病毒的传播自身的传播力度为主要势能,人们的防疫措施尚未建立完全,因此势能为正,不断转化为动能;在第12天左右的位置,势能由正变成负,函数的凹凸性发生了变化,也就是说人们的防疫管控力度已经成为了主要势能,疫情的传播达到了拐点,增长速度得到了控制;在第22天左右的位置,动能由正变成负,函数的单调性发生了变化,疫情的传播达到了极值点,感染人数从增长变为了减少;轨迹进入三四象限之后,疫情就逐渐缓解,当感染人数逐渐接近0的时候,减少的速度也会逐渐放缓,也就是加速度会回到一个较小的正值,最终当动能回到0时,也就意味着疫情的基本结束。

以上为前两个主成分,并可以绘制二维的主成分得分图。可以看到前两个主成分包含的数据信息已经超过了92%。

可以看到,从横坐标来看,右侧的北京,重庆,江西三省市的第一主成分得分较高,也就意味着和第一主成分函数正向吻合,在中期的值较大,即疫情巅峰时期的感染人口比例较大;反之,河南,广东,湖南,上海四省市第一主成分得分较低,疫情巅峰时期感染人口比例较小。再观察纵坐标,主要反映了后期即3月之后的疫情感染人口比例,可以发现北京,广东两地仍处于较高的水平,这也与两地人口密度大,人口流量大有关。而广西,安徽等地感染人口比例已经基本趋于0。


关于作者

在此对Mingji Tang对本文所作的贡献表示诚挚感谢,他专长时间序列、机器学习、回归分析。

相关文章
|
5月前
|
数据采集 数据可视化 数据挖掘
用 Excel+Power Query 做电商数据分析:从 “每天加班整理数据” 到 “一键生成报表” 的配置教程
在电商运营中,数据是增长的关键驱动力。然而,传统的手工数据处理方式效率低下,耗费大量时间且易出错。本文介绍如何利用 Excel 中的 Power Query 工具,自动化完成电商数据的采集、清洗与分析,大幅提升数据处理效率。通过某美妆电商的实战案例,详细拆解从多平台数据整合到可视化报表生成的全流程,帮助电商从业者摆脱繁琐操作,聚焦业务增长,实现数据驱动的高效运营。
|
12月前
|
数据采集 数据可视化 数据挖掘
Pandas数据应用:天气数据分析
本文介绍如何使用 Pandas 进行天气数据分析。Pandas 是一个强大的 Python 数据处理库,适合处理表格型数据。文章涵盖加载天气数据、处理缺失值、转换数据类型、时间序列分析(如滚动平均和重采样)等内容,并解决常见报错如 SettingWithCopyWarning、KeyError 和 TypeError。通过这些方法,帮助用户更好地进行气候趋势预测和决策。
353 71
|
4月前
|
SQL 数据挖掘 BI
数据分析的尽头,是跳出数据看数据!
当前许多企业在数据分析上投入大量资源,却常陷入“数据越看越细,业务越看越虚”的困境。报表繁杂、指标众多,但决策难、行动少,分析流于形式。真正有价值的数据分析,不在于图表多漂亮,而在于能否带来洞察、推动决策、指导行动。本文探讨如何跳出数据、回归业务场景,实现数据驱动的有效落地。
|
10月前
|
SQL 人工智能 数据可视化
数据团队必读:智能数据分析文档(DataV Note)五种高效工作模式
数据项目复杂,涉及代码、数据、运行环境等多部分。随着AI发展,数据科学团队面临挑战。协作式数据文档(如阿里云DataV Note)成为提升效率的关键工具。它支持跨角色协同、异构数据处理、多语言分析及高效沟通,帮助创建知识库,实现可重现的数据科学过程,并通过一键分享报告促进数据驱动决策。未来,大模型AI将进一步增强其功能,如智能绘图、总结探索、NLP2SQL/Python和AutoReport,为数据分析带来更多可能。
567 142
|
11月前
|
SQL 数据可视化 大数据
从数据小白到大数据达人:一步步成为数据分析专家
从数据小白到大数据达人:一步步成为数据分析专家
581 92
|
12月前
|
存储 数据采集 数据可视化
Pandas数据应用:电子商务数据分析
本文介绍如何使用 Pandas 进行电子商务数据分析,涵盖数据加载、清洗、预处理、分析与可视化。通过 `read_csv` 等函数加载数据,利用 `info()` 和 `describe()` 探索数据结构和统计信息。针对常见问题如缺失值、重复记录、异常值等,提供解决方案,如 `dropna()`、`drop_duplicates()` 和正则表达式处理。结合 Matplotlib 等库实现数据可视化,探讨内存不足和性能瓶颈的应对方法,并总结常见报错及解决策略,帮助提升电商企业的数据分析能力。
470 73
|
11月前
|
存储 数据采集 数据可视化
Pandas数据应用:医疗数据分析
Pandas是Python中强大的数据操作和分析库,广泛应用于医疗数据分析。本文介绍了使用Pandas进行医疗数据分析的常见问题及解决方案,涵盖数据导入、预处理、清洗、转换、可视化等方面。通过解决文件路径错误、编码不匹配、缺失值处理、异常值识别、分类变量编码等问题,结合Matplotlib等工具实现数据可视化,并提供了解决常见报错的方法。掌握这些技巧可以提高医疗数据分析的效率和准确性。
321 22
|
9月前
|
机器学习/深度学习 传感器 数据采集
基于机器学习的数据分析:PLC采集的生产数据预测设备故障模型
本文介绍如何利用Python和Scikit-learn构建基于PLC数据的设备故障预测模型。通过实时采集温度、振动、电流等参数,进行数据预处理和特征提取,选择合适的机器学习模型(如随机森林、XGBoost),并优化模型性能。文章还分享了边缘计算部署方案及常见问题排查,强调模型预测应结合定期维护,确保系统稳定运行。
865 0
|
12月前
|
数据采集 数据可视化 索引
Pandas数据应用:股票数据分析
本文介绍了如何使用Pandas库进行股票数据分析。首先,通过pip安装并导入Pandas库。接着,从本地CSV文件读取股票数据,并解决常见的解析错误。然后,利用head()、info()等函数查看数据基本信息,进行数据清洗,处理缺失值和重复数据。再者,结合Matplotlib和Seaborn进行数据可视化,绘制收盘价折线图。最后,进行时间序列分析,设置日期索引、重采样和计算移动平均线。通过这些步骤,帮助读者掌握Pandas在股票数据分析中的应用。
481 5
|
12月前
|
数据采集 监控 数据挖掘
常用电商商品数据API接口(item get)概述,数据分析以及上货
电商商品数据API接口(item get)是电商平台上用于提供商品详细信息的接口。这些接口允许开发者或系统以编程方式获取商品的详细信息,包括但不限于商品的标题、价格、库存、图片、销量、规格参数、用户评价等。这些信息对于电商业务来说至关重要,是商品数据分析、价格监控、上货策略制定等工作的基础。