应用统计学与R语言实现学习笔记(一)——简介

简介: 版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/ESA_DSQ/article/details/71076504 Chapter ...
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/ESA_DSQ/article/details/71076504

Chapter 1 Introduction

本部分内容是我这学期公选课《应用统计学》的学习笔记,主要参考书目为如下两本:
贾俊平,《统计学》(第五版),中国人民大学出版社,2012.
何晓群,《多元统计分析》(第三版),中国人民大学出版社,2012.
本篇为第一章节,也就是Introduction(简介)部分。

1.从问题说起

常常听到的一句话,好的科学论文解决一个科学问题,科学的诞生本身就和问题离不开。老生常谈的就是像牛顿被苹果砸了之后,就想到一个问题,为啥苹果不飞上天和太阳肩并肩呢?
我答:因为会被烤焦。
。。。
嗯,幽默一下。
总结下来说,科研中有很多问题跟统计学相关(笔者是地学和生态学背景,就提点接地气的问题)。
譬如:
(1)人口研究当中,我们希望了解65岁以上老年人所占的比例,以便于我们更好地研究老龄化的问题。
(2)从几个监测站点的汽车尾气监测推断今天北京市的汽车尾气排放是否达到大气污染物排放标准。
(3)影响植物光合作用的因素是什么,各个因素的影响有多大?
以及等等等。
总结来说,可以分为以下的几类:
(1)统计量问题;(2)参数(推断统计)问题;(3)归因问题;(4)预测问题。

2.统计学及其研究过程

那么统计学又是什么呢?

statistics: the science of collecting,analyzing, presenting, and interpreting data.
Copyright 1994-2000 Encyclopaedia Britannica, In

翻译过来就是

统计学是收集、分析、表述和解释数据的科学( 不列颠百科全书)

所以统计学包括了:

  • 数据收集:取得数据
  • 数据处理:整理与图表展示
  • 数据分析:利用统计分析方法分析数据
  • 数据解释:结果的说明
  • 得到结论:从数据分析中得出客观结论。

同时跟统计学密切相关的就是概率论。这二者都是研究随机现象数量规律的学科。而二者的区别可以用一张图来形象体现:

这里写图片描述

也就是说,概率论是——我知道箱子里面是什么样的,我想知道我拿在手里的球是什么样的可能性分别有多大。统计学则是——我不知道箱子里面是什么样的,但是我已经知道我拿在手里的球是什么样的,我想靠我手里的球的样子去推断箱子是什么样的。
有兴趣的也可以查看知乎上的回答。

https://www.zhihu.com/question/20269390

总结起来,统计学的研究过程就像下面的流程图。

Created with Raphaël 2.1.0 实际问题 收集数据(取得数据) 整理数据(处理数据) 分析数据(研究数据) 解释数据(结果说明)

当然这里面很容易出问题的是解释数据——数学上有意义,并不代表现实中有意义,非常容易出现很多的悖论。
比如太阳升起的时间与每个人起床时间相关性很高,但是我不能说因为每个人都起床了,所以太阳升起了。

3.统计方法及其应用领域

从前面提到的我们知道,统计方法是通过已知的观测数据去分析随机现象的数量规律。因此统计方法就包括了两大部分:描述统计与推断统计。
其实核心就在于我们所观测的样本是否等于总体。
样本=总体,那么使用描述统计就能够用来描述我们所研究的现象。
样本≠总体,那么使用推断统计才能较为准确地描述我们所研究的现象。
事实上,近年来火热的大数据就是因为技术(传感器等)发展,我们足够获取可以近似等于全样本甚至全样本的数据而不是以往的样本数据所引起的一场变革,也就是说是由数据驱动的变革。

Created with Raphaël 2.1.0 统计方法 样本=总体? 描述统计 结论 推断统计 分布已知? 假设检验 参数估计 yes no yes no

统计学应用领域十分广泛,这里就不细谈了。

4.统计数据类型

由于应用广泛,所以统计数据类型也是多样化的。不同的划分标准类型也不相同:
(1)按照计量层次划分

  • 分类数据
  • 顺序数据
  • 数值数据

(2)按收集方法划分

  • 调查观察数据
  • 试验数据

(3)按时间状况划分

  • 截面数据
  • 时序数据

5.统计学中的几个基本概念

统计学中的基本概念分别是:

  • 总体(population)
  • 样本(sample)
  • 参数(parameter)
  • 统计量(statistic)
  • 变量(variable)

总体——研究对象的全体
样本——研究对象的部分个体,观测数据
参数——用来描述总体的数学度量
统计量——用来描述样本的数学度量
变量——描述现象的某种特征

Created with Raphaël 2.1.0 总体(参数) 样本(统计量)
目录
相关文章
|
4月前
|
存储 数据可视化 数据挖掘
R语言在生物信息学中的应用
【10月更文挑战第21天】生物信息学是生物学、计算机科学和信息技术相结合的交叉学科,主要研究生物大分子信息的存储、处理、分析和解释。R语言作为一种强大的统计分析工具,被广泛应用于生物信息学领域。本文将介绍R语言在生物信息学中的应用,包括基因组学、转录组学、蛋白质组学、代谢组学等方面,帮助读者了解R语言在生物信息学中的重要性和应用前景。
161 4
|
4月前
|
机器学习/深度学习 数据采集 人工智能
R语言是一种强大的编程语言,广泛应用于统计分析、数据可视化、机器学习等领域
R语言是一种广泛应用于统计分析、数据可视化及机器学习的强大编程语言。本文为初学者提供了一份使用R语言进行机器学习的入门指南,涵盖R语言简介、安装配置、基本操作、常用机器学习库介绍及实例演示,帮助读者快速掌握R语言在机器学习领域的应用。
179 3
|
4月前
|
机器学习/深度学习 并行计算 数据挖掘
R语言是一种强大的统计分析工具,广泛应用于数据分析和机器学习领域
【10月更文挑战第21天】R语言是一种强大的统计分析工具,广泛应用于数据分析和机器学习领域。本文将介绍R语言中的一些高级编程技巧,包括函数式编程、向量化运算、字符串处理、循环和条件语句、异常处理和性能优化等方面,以帮助读者更好地掌握R语言的编程技巧,提高数据分析的效率。
94 2
【R语言实战】——fGARCH包在金融时序上的模拟应用
【R语言实战】——fGARCH包在金融时序上的模拟应用
|
5月前
|
数据采集 数据可视化 数据挖掘
R语言在金融数据分析中的深度应用:探索数据背后的市场智慧
【9月更文挑战第1天】R语言在金融数据分析中展现出了强大的功能和广泛的应用前景。通过丰富的数据处理函数、强大的统计分析功能和优秀的可视化效果,R语言能够帮助金融机构深入挖掘数据价值,洞察市场动态。未来,随着金融数据的不断积累和技术的不断进步,R语言在金融数据分析中的应用将更加广泛和深入。
|
5月前
|
机器学习/深度学习 算法 数据挖掘
R语言中的支持向量机(SVM)与K最近邻(KNN)算法实现与应用
【9月更文挑战第2天】无论是支持向量机还是K最近邻算法,都是机器学习中非常重要的分类算法。它们在R语言中的实现相对简单,但各有其优缺点和适用场景。在实际应用中,应根据数据的特性、任务的需求以及计算资源的限制来选择合适的算法。通过不断地实践和探索,我们可以更好地掌握这些算法并应用到实际的数据分析和机器学习任务中。
|
6月前
|
机器学习/深度学习 资源调度 算法
R语言逻辑回归与分类模型的深度探索与应用
【8月更文挑战第31天】逻辑回归作为一种经典的分类算法,在R语言中通过`glm()`函数可以轻松实现。其简单、高效且易于解释的特点,使得它在处理二分类问题时具有广泛的应用价值。然而,值得注意的是,逻辑回归在处理非线性关系或复杂交互作用时可能表现不佳,此时可能需要考虑其他更复杂的分类模型。
|
6月前
|
数据挖掘
R语言方差分析(ANOVA):理解与应用
【8月更文挑战第31天】ANOVA是一种强大的统计方法,用于比较三个或更多组之间的均值差异。在R语言中,我们可以轻松地使用`aov()`函数进行ANOVA分析,并通过后置检验(如TukeyHSD检验)来进一步分析哪些组之间存在显著差异。ANOVA在多个领域都有广泛的应用,是数据分析中不可或缺的工具之一。
|
6月前
|
程序员 数据处理
R语言控制结构:条件判断与循环在R中的应用
【8月更文挑战第27天】R语言中的条件判断和循环结构是编程中不可或缺的部分,它们允许程序员根据特定的条件或规则来控制程序的执行流程。通过灵活使用这些控制结构,可以编写出高效、可维护的R语言代码,以应对复杂的数据处理和分析任务。
|
7月前
|
数据采集 数据可视化 大数据
R语言在统计分析中的应用与实践
【7月更文挑战第30天】R语言以其强大的统计分析能力和开源自由的特性,在统计分析领域发挥着重要作用。无论是基础的描述性统计、推断性统计,还是复杂的回归分析、时间序列分析和生存分析,R语言都提供了丰富的函数和包来支持。通过学习和掌握R语言,数据分析师和研究者可以更加高效地进行数据分析,获取有价值的信息和结论。未来,随着大数据和云计算等新兴技术的发展,R语言的应用前景将更加广阔。