R语言非参数PDF和CDF估计、非参数分位数回归分析间歇泉、GDP增长数据

简介: R语言非参数PDF和CDF估计、非参数分位数回归分析间歇泉、GDP增长数据

全文链接:http://tecdat.cn/?p=29841


最近我们被客户要求撰写关于非参数估计的研究报告。在应用的设置中,我们经常遇到分类数据类型和连续数据类型的组合点击文末“阅读原文”获取完整代码数据


熟悉传统非参数核平滑方法的人会明白,这些方法假定基础数据本质上是连续的,但事实往往并非如此。一种同时处理连续数据和分类数据存在的方法称为“频率”方法,其中数据被分解为对应于分类变量假设值的子集(“单元格”),然后才将密度或位置应用于每个单元格中剩余的连续数据。


非参数频率方法被广泛认为是不令人满意的,因为它们通常会导致使用样品分裂引起的大量效率损失。

在本文中,我们通过许多经验应用来说明R的使用。选择每个应用程序是为了在应用的环境中突出显示特定的计量经济学方法。


非参数无条件PDF和 CDF估计


间歇泉是位于黄石国家公园的旅游景点。这个包含 n = 272 次观测的著名数据集由两个变量组成,以分钟为单位的喷发持续时间(以分钟为单位)和等待下一次喷发的时间(以分钟为单位)。公园服务使用此数据集来模拟预期持续时间,具体取决于自上次喷发以来经过的时间量。然而,对联合分布进行建模本身就很有意义,并且核估计器很容易揭示联合 PDF 和 CDF 的基本双峰性质。在本例中,我们加载旧的间歇泉数据并计算密度和分布函数。结果如图所示。请注意,在此示例中,我们一步进行带宽选择和估计

R> Ful <- npst(~ eruptions + waiting, data = fal)
R> summary(f.fful)

R> summary(Fhful)

以下代码将生成图。

R> plot(f.fthful

如果用参数模型(例如二元正态(对称、单峰和单调递减)来模拟这种密度,当然无法揭示核估计容易揭示的底层结构。

图 :Old Faithful 数据的非参数多变量 PDF 和 CDF 估计值。


点击标题查阅往期内容


R语言非参数方法:使用核回归平滑估计和K-NN(K近邻算法)分类预测心脏病数据


01

02

03

04


非参数条件PDF和CDF估计


我们考虑GDP增长,涵盖1951-1998年期间的21个地区。总共有n = 1008个观测值,以及两个变量,GDP和年份。首先,我们计算带宽。请注意,这可能需要一两分钟,具体取决于计算机的速度。我们覆盖搜索方法的默认容差,因为目标函数表现良好(当然通常不要这样做),然后我们计算。请注意,在本例中,我们一步进行带宽选择和估计。

R> fat <- npns(gdp ~ year,

+ tol = 0.1,

+ ftol = 0.1,

R> Fat <- npst(gdp ~ year,

+ tol = 0.1,

+ ftol = 0.1,

图绘制了 GDP 面板生成的条件 PDF 和 CDF。以下代码将生成图 。

R> plot

图显示,收入分配已从1950年代初的单峰分配演变为1990年代的明显双峰分配。此结果对带宽选择具有鲁棒性,无论是使用简单的经验法则还是数据驱动的方法(如可能叉验证)都可以观察到。核方法很容易揭示这种演变,如果使用收入分配的参数模型(例如,单峰对数正态分布通常用于模拟收入分配),则很容易被忽略。


非参数分位数回归


我们再次考虑GDP增长数据。首先,我们计算交叉验证带宽的可能性(默认)。我们覆盖了搜索方法的默认容差,因为目标函数表现良好(当然,通常不要这样做)。然后我们使用Li和Racine(2008)的方法计算结果的条件分位数估计。例如,我们计算第 25、50 和 75 条件分位数。请注意,这可能需要一两分钟,具体取决于计算机的速度。请注意,对于此示例,我们首先以避免不必要的带宽对象重新计算。

R> bw <- npbw(formula = gdp ~ year,
+ tol = 0.1,
+ ftol = 0.1,
R> modq0.25 <- nptau = 0.25)
R> mo.q0.50 <- nbw, tau = 0.50)
R> mod.q0.75 <- npq, tau = 0.75)

图绘制了生成的分位数估计值。以下代码将生成图。

R> plot

R> lines(It$year, mode.q0.25quantile )

此应用程序的一个很好的功能是解释变量是有序的,并且每年存在多个观测值。将绘图函数与有序数据一起使用会生成一个箱线图,该箱线图很容易显示非平滑的第 25、50 和 75 个分位数。然后可以直接将这些非平滑分位数估计值与通过直接估计平滑CDF获得的估计值进行比较,如图所示。

GDP 面板上的非参数分位数回归。


参考文献


Aitchison J, Aitken CGG (1976).“核方法的多元二元判别。”生物计量学,63(3),413-420。

Baiocchi G (2006). “Economic Applications of Nonparametric Methods.” Ph.d. thesis, University of York


相关文章
|
7月前
|
机器学习/深度学习 分布式计算 算法
Spark快速大数据分析PDF下载读书分享推荐
《Spark快速大数据分析》适合初学者,聚焦Spark实用技巧,同时深入核心概念。作者团队来自Databricks,书中详述Spark 3.0新特性,结合机器学习展示大数据分析。Spark是大数据分析的首选工具,本书助你驾驭这一利器。[PDF下载链接][1]。 ![Spark Book Cover][2] [1]: https://zhangfeidezhu.com/?p=345 [2]: https://i-blog.csdnimg.cn/direct/6b851489ad1944548602766ea9d62136.png#pic_center
228 1
Spark快速大数据分析PDF下载读书分享推荐
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
模型训练数据-MinerU一款Pdf转Markdown软件
MinerU是由上海人工智能实验室OpenDataLab团队开发的开源智能数据提取工具,专长于复杂PDF文档的高效解析与提取。它能够将含有图片、公式、表格等多模态内容的PDF文档转化为Markdown格式,同时支持从网页和电子书中提取内容,显著提升了AI语料准备的效率。MinerU具备高精度的PDF模型解析工具链,能自动识别乱码,保留文档结构,并将公式转换为LaTeX格式,广泛适用于学术、财务、法律等领域。
301 4
|
4月前
|
Java BI API
spring boot 整合 itextpdf 导出 PDF,写入大文本,写入HTML代码,分析当下导出PDF的几个工具
这篇文章介绍了如何在Spring Boot项目中整合iTextPDF库来导出PDF文件,包括写入大文本和HTML代码,并分析了几种常用的Java PDF导出工具。
896 0
spring boot 整合 itextpdf 导出 PDF,写入大文本,写入HTML代码,分析当下导出PDF的几个工具
|
5月前
|
机器学习/深度学习 算法
概率分布深度解析:PMF、PDF和CDF的技术指南
本文将深入探讨概率分布,详细阐述概率质量函数(PMF)、概率密度函数(PDF)和累积分布函数(CDF)这些核心概念,并通过实际示例进行说明。
577 15
概率分布深度解析:PMF、PDF和CDF的技术指南
|
6月前
|
JSON JavaScript 数据格式
打印插件 hiprint 使用、回单打印PDF保存本地、将列表数据打印成pdf文件保存到本地
这篇文章介绍了如何使用hiprint打印插件将列表数据打印成PDF文件并保存到本地,包括插件的配置、依赖安装、项目代码案例以及如何预览和打印数据。
打印插件 hiprint 使用、回单打印PDF保存本地、将列表数据打印成pdf文件保存到本地
|
7月前
|
数据挖掘 Python
利用Python进行数据分析PDF下载经典数据分享推荐
**Python数据分析大师作,Wes McKinney亲著,详述数据操作、清洗与分析。第2版面向Python 3.6,涵盖pandas、NumPy、IPython和Jupyter更新,实战案例丰富;第3版已升级至Python 3.10和pandas 1.4,继续引领数据科学潮流。[PDF下载](https://zhangfeidezhu.com/?p=337)**
122 0
利用Python进行数据分析PDF下载经典数据分享推荐
|
9月前
|
机器学习/深度学习 算法
R语言分类回归分析考研热现象分析与考研意愿价值变现
R语言分类回归分析考研热现象分析与考研意愿价值变现
|
9月前
|
算法 Python
R语言随机波动模型SV:马尔可夫蒙特卡罗法MCMC、正则化广义矩估计和准最大似然估计上证指数收益时间序列
R语言随机波动模型SV:马尔可夫蒙特卡罗法MCMC、正则化广义矩估计和准最大似然估计上证指数收益时间序列
|
9月前
|
机器学习/深度学习 数据采集 算法
R语言、WEKA关联规则、决策树、聚类、回归分析工业企业创新情况影响因素数据
R语言、WEKA关联规则、决策树、聚类、回归分析工业企业创新情况影响因素数据
|
9月前
R语言偏最小二乘回归PLS回归分析制药产品化学制造过程数据、缺失值填充、变量重要性
R语言偏最小二乘回归PLS回归分析制药产品化学制造过程数据、缺失值填充、变量重要性

热门文章

最新文章