Pandas数据分析实战(1):2023美国财富1000强公司情况

简介: Pandas数据分析实战(1):2023美国财富1000强公司情况

本期,我们从kaggle上拿到一个数据集:2023美国财富1000强的公司,我这里放个链接,大家拿去下载:链接:https://pan.baidu.com/s/1A8TbnQccFovdgF4NDD3pvw提取码:6666

一、看看数据集的样子我们用pandas打开下载的csv文件,

import numpy as np import pandas as pd import seaborn as snsimport matplotlib.pyplot as plt
df = pd.read_csv('fortune1000_2023.csv')df

如下图:

91d2d8c3207bc98ebf964084f32a0da4.png

1000行、31列的数据表,具体列情况可以用如下语句查看:


df.info()

1aa03b1222d2059534a83685ee1dabe7.png

这里面包含了排名、公司名、股票代码、所属行业、公司CEO等等一系列信息,后面我们挑一些重点分开来进行分析。

二、数据清洗我们使用isnull语句来看一下每一列到底缺了多少数据?


df.isnull().sum()

c9b10c00bb29df223585816bf25e5838.png

可以看到,失值来自以下几列Ticker,Growth_in_Jobs, Change_in_Rank,Gained_in_Rank, Dropped_in_Rank,Newcomer_to_the_Fortune500,MarketCap_March31_M,ProfitsPercentChange, MarketCap_Updated_M,CEO, Footnote, RevenuePercentChange。其中,缺失值最多的一列是Newcomer_to_the_Fortune500,缺了500个数据,我们有以下三种方法来处理缺失值:1. 扔掉这些缺失值所在的行列数据;2. 补充缺失数据;3. 用相关数据来推算出这些数据。考虑到Newcomer_to_the_Fortune500中有500个数据,如果扔掉的话,基本这个表就少了一半的数据,所以,我们根据这几列的数据类型来补充数据,具体代码如下:

#数字类型的 
df['Change_in_Rank'] = df['Change_in_Rank'].fillna(0)df['MarketCap_March31_M'] = df['MarketCap_March31_M'].fillna(0)df['ProfitsPercentChange'] = df['ProfitsPercentChange'].fillna(0)df['MarketCap_Updated_M'] = df['MarketCap_Updated_M'].fillna(0)df['RevenuePercentChange'] = df['RevenuePercentChange'].fillna(0)
#字符、对象类型的 df['Ticker'] = df['Ticker'].fillna('NA')df['Gained_in_Rank']=df['Gained_in_Rank'].fillna('NA')df['Dropped_in_Rank']=df['Dropped_in_Rank'].fillna('NA')df['Newcomer_to_the_Fortune500']=df['Newcomer_to_the_Fortune500'].fillna('NA')df['Growth_in_Jobs']=df['Growth_in_Jobs'].fillna('NA')df['CEO']=df['CEO'].fillna('NA')df['Footnote']=df['Footnote'].fillna('NA')df.isna().sum()

运行结果:

a47dc43d89d8d8a9e83573b26e86340a.png

好了,数据清洗,补充数据完整了。三、公司及行业分析1. Top10的公司表内默认的排名就是从1到1000的排名,所以我们只需用

df.head(10)

就可以看到Top10的公司了,如下: 3790c4d6ec766af847a1b9d51b03f6e3.png


我们精确看一下这10家公司所属的行业:

df[['Rank','Company','Industry']].head(10)

6205367b5e1d763cfa2adcfc2be7357f.png

这10家公司分别为沃尔玛(一般采购)、亚马逊(互联网服务和零售)、埃克森美孚(石油精炼)苹果(计算机,办公设备)、联合健康保险(医疗保健: 保险和管理保健)、 CVS 健康(医疗保健: 制药和其他服务)、伯克希尔·哈撒韦(保险: 财产和伤亡(股票))、谷歌(互联网服务和零售)、麦克森(医疗保健)、雪佛龙(石油精炼)。2. 行业分析我们统计一下表内有多少个行业?

plot1=df['Industry'].value_counts()plot1

结果为:

0ed58e5b8333d91afc53fab06718535e.png

74个不同的行业,行业数量前10为:

5f0009dfe23b0a1c4a41540537b31ba4.png

画个行业饼图

plt.figure(figsize=(25,25))plot1.plot( kind='pie')

3daaea16b797556b07000b7b8cba9aa8.png

数量最多的10大行业分别为:公用事业: 天然气和电力、商业银行、矿业、原油生产、专业零售商: 其他、化工企业、工业机械、互联网服务和零售商、房地产公司、半导体和其他电子元件、保险公司: 财产和伤亡(股票)。可以看到传统能源行业在Top1000企业中占比还是非常高的。

未完待续~~~

相关文章
|
4天前
|
数据采集 数据可视化 数据挖掘
Pandas数据应用:天气数据分析
本文介绍如何使用 Pandas 进行天气数据分析。Pandas 是一个强大的 Python 数据处理库,适合处理表格型数据。文章涵盖加载天气数据、处理缺失值、转换数据类型、时间序列分析(如滚动平均和重采样)等内容,并解决常见报错如 SettingWithCopyWarning、KeyError 和 TypeError。通过这些方法,帮助用户更好地进行气候趋势预测和决策。
94 71
|
2月前
|
消息中间件 数据挖掘 Kafka
Apache Kafka流处理实战:构建实时数据分析应用
【10月更文挑战第24天】在当今这个数据爆炸的时代,能够快速准确地处理实时数据变得尤为重要。无论是金融交易监控、网络行为分析还是物联网设备的数据收集,实时数据处理技术都是不可或缺的一部分。Apache Kafka作为一款高性能的消息队列系统,不仅支持传统的消息传递模式,还提供了强大的流处理能力,能够帮助开发者构建高效、可扩展的实时数据分析应用。
102 5
|
3天前
|
存储 数据采集 数据可视化
Pandas数据应用:电子商务数据分析
本文介绍如何使用 Pandas 进行电子商务数据分析,涵盖数据加载、清洗、预处理、分析与可视化。通过 `read_csv` 等函数加载数据,利用 `info()` 和 `describe()` 探索数据结构和统计信息。针对常见问题如缺失值、重复记录、异常值等,提供解决方案,如 `dropna()`、`drop_duplicates()` 和正则表达式处理。结合 Matplotlib 等库实现数据可视化,探讨内存不足和性能瓶颈的应对方法,并总结常见报错及解决策略,帮助提升电商企业的数据分析能力。
98 73
|
2月前
|
数据采集 存储 数据挖掘
Python数据分析:Pandas库的高效数据处理技巧
【10月更文挑战第27天】在数据分析领域,Python的Pandas库因其强大的数据处理能力而备受青睐。本文介绍了Pandas在数据导入、清洗、转换、聚合、时间序列分析和数据合并等方面的高效技巧,帮助数据分析师快速处理复杂数据集,提高工作效率。
81 0
|
5天前
|
数据采集 数据可视化 索引
Pandas数据应用:股票数据分析
本文介绍了如何使用Pandas库进行股票数据分析。首先,通过pip安装并导入Pandas库。接着,从本地CSV文件读取股票数据,并解决常见的解析错误。然后,利用head()、info()等函数查看数据基本信息,进行数据清洗,处理缺失值和重复数据。再者,结合Matplotlib和Seaborn进行数据可视化,绘制收盘价折线图。最后,进行时间序列分析,设置日期索引、重采样和计算移动平均线。通过这些步骤,帮助读者掌握Pandas在股票数据分析中的应用。
33 5
|
2月前
|
机器学习/深度学习 数据采集 数据可视化
Python数据科学实战:从Pandas到机器学习
Python数据科学实战:从Pandas到机器学习
|
2月前
|
机器学习/深度学习 数据采集 数据挖掘
解锁 Python 数据分析新境界:Pandas 与 NumPy 高级技巧深度剖析
Pandas 和 NumPy 是 Python 中不可或缺的数据处理和分析工具。本文通过实际案例深入剖析了 Pandas 的数据清洗、NumPy 的数组运算、结合两者进行数据分析和特征工程,以及 Pandas 的时间序列处理功能。这些高级技巧能够帮助我们更高效、准确地处理和分析数据,为决策提供支持。
50 2
|
2月前
|
存储 数据挖掘 数据处理
Python数据分析:Pandas库的高效数据处理技巧
【10月更文挑战第26天】Python 是数据分析领域的热门语言,Pandas 库以其高效的数据处理功能成为数据科学家的利器。本文介绍 Pandas 在数据读取、筛选、分组、转换和合并等方面的高效技巧,并通过示例代码展示其实际应用。
53 2
|
2月前
|
数据采集 数据可视化 数据挖掘
Python数据分析:Pandas库实战指南
Python数据分析:Pandas库实战指南
|
2月前
|
并行计算 数据挖掘 大数据
Python数据分析实战:利用Pandas处理大数据集
Python数据分析实战:利用Pandas处理大数据集