Pandas数据分析实战(1):2023美国财富1000强公司情况

简介: Pandas数据分析实战(1):2023美国财富1000强公司情况

本期,我们从kaggle上拿到一个数据集:2023美国财富1000强的公司,我这里放个链接,大家拿去下载:链接:https://pan.baidu.com/s/1A8TbnQccFovdgF4NDD3pvw提取码:6666

一、看看数据集的样子我们用pandas打开下载的csv文件,

import numpy as np import pandas as pd import seaborn as snsimport matplotlib.pyplot as plt
df = pd.read_csv('fortune1000_2023.csv')df

如下图:

91d2d8c3207bc98ebf964084f32a0da4.png

1000行、31列的数据表,具体列情况可以用如下语句查看:


df.info()

1aa03b1222d2059534a83685ee1dabe7.png

这里面包含了排名、公司名、股票代码、所属行业、公司CEO等等一系列信息,后面我们挑一些重点分开来进行分析。

二、数据清洗我们使用isnull语句来看一下每一列到底缺了多少数据?


df.isnull().sum()

c9b10c00bb29df223585816bf25e5838.png

可以看到,失值来自以下几列Ticker,Growth_in_Jobs, Change_in_Rank,Gained_in_Rank, Dropped_in_Rank,Newcomer_to_the_Fortune500,MarketCap_March31_M,ProfitsPercentChange, MarketCap_Updated_M,CEO, Footnote, RevenuePercentChange。其中,缺失值最多的一列是Newcomer_to_the_Fortune500,缺了500个数据,我们有以下三种方法来处理缺失值:1. 扔掉这些缺失值所在的行列数据;2. 补充缺失数据;3. 用相关数据来推算出这些数据。考虑到Newcomer_to_the_Fortune500中有500个数据,如果扔掉的话,基本这个表就少了一半的数据,所以,我们根据这几列的数据类型来补充数据,具体代码如下:

#数字类型的 
df['Change_in_Rank'] = df['Change_in_Rank'].fillna(0)df['MarketCap_March31_M'] = df['MarketCap_March31_M'].fillna(0)df['ProfitsPercentChange'] = df['ProfitsPercentChange'].fillna(0)df['MarketCap_Updated_M'] = df['MarketCap_Updated_M'].fillna(0)df['RevenuePercentChange'] = df['RevenuePercentChange'].fillna(0)
#字符、对象类型的 df['Ticker'] = df['Ticker'].fillna('NA')df['Gained_in_Rank']=df['Gained_in_Rank'].fillna('NA')df['Dropped_in_Rank']=df['Dropped_in_Rank'].fillna('NA')df['Newcomer_to_the_Fortune500']=df['Newcomer_to_the_Fortune500'].fillna('NA')df['Growth_in_Jobs']=df['Growth_in_Jobs'].fillna('NA')df['CEO']=df['CEO'].fillna('NA')df['Footnote']=df['Footnote'].fillna('NA')df.isna().sum()

运行结果:

a47dc43d89d8d8a9e83573b26e86340a.png

好了,数据清洗,补充数据完整了。三、公司及行业分析1. Top10的公司表内默认的排名就是从1到1000的排名,所以我们只需用

df.head(10)

就可以看到Top10的公司了,如下: 3790c4d6ec766af847a1b9d51b03f6e3.png


我们精确看一下这10家公司所属的行业:

df[['Rank','Company','Industry']].head(10)

6205367b5e1d763cfa2adcfc2be7357f.png

这10家公司分别为沃尔玛(一般采购)、亚马逊(互联网服务和零售)、埃克森美孚(石油精炼)苹果(计算机,办公设备)、联合健康保险(医疗保健: 保险和管理保健)、 CVS 健康(医疗保健: 制药和其他服务)、伯克希尔·哈撒韦(保险: 财产和伤亡(股票))、谷歌(互联网服务和零售)、麦克森(医疗保健)、雪佛龙(石油精炼)。2. 行业分析我们统计一下表内有多少个行业?

plot1=df['Industry'].value_counts()plot1

结果为:

0ed58e5b8333d91afc53fab06718535e.png

74个不同的行业,行业数量前10为:

5f0009dfe23b0a1c4a41540537b31ba4.png

画个行业饼图

plt.figure(figsize=(25,25))plot1.plot( kind='pie')

3daaea16b797556b07000b7b8cba9aa8.png

数量最多的10大行业分别为:公用事业: 天然气和电力、商业银行、矿业、原油生产、专业零售商: 其他、化工企业、工业机械、互联网服务和零售商、房地产公司、半导体和其他电子元件、保险公司: 财产和伤亡(股票)。可以看到传统能源行业在Top1000企业中占比还是非常高的。

未完待续~~~

相关文章
|
18天前
|
消息中间件 数据挖掘 Kafka
Apache Kafka流处理实战:构建实时数据分析应用
【10月更文挑战第24天】在当今这个数据爆炸的时代,能够快速准确地处理实时数据变得尤为重要。无论是金融交易监控、网络行为分析还是物联网设备的数据收集,实时数据处理技术都是不可或缺的一部分。Apache Kafka作为一款高性能的消息队列系统,不仅支持传统的消息传递模式,还提供了强大的流处理能力,能够帮助开发者构建高效、可扩展的实时数据分析应用。
64 5
|
15天前
|
数据采集 存储 数据挖掘
Python数据分析:Pandas库的高效数据处理技巧
【10月更文挑战第27天】在数据分析领域,Python的Pandas库因其强大的数据处理能力而备受青睐。本文介绍了Pandas在数据导入、清洗、转换、聚合、时间序列分析和数据合并等方面的高效技巧,帮助数据分析师快速处理复杂数据集,提高工作效率。
43 0
|
1月前
|
数据采集 数据可视化 数据挖掘
基于Python的数据分析与可视化实战
本文将引导读者通过Python进行数据分析和可视化,从基础的数据操作到高级的数据可视化技巧。我们将使用Pandas库处理数据,并利用Matplotlib和Seaborn库创建直观的图表。文章不仅提供代码示例,还将解释每个步骤的重要性和目的,帮助读者理解背后的逻辑。无论你是初学者还是有一定基础的开发者,这篇文章都将为你提供有价值的见解和技能。
100 0
|
1月前
|
SQL 数据采集 数据可视化
深入 Python 数据分析:高级技术与实战应用
本文系统地介绍了Python在高级数据分析中的应用,涵盖数据读取、预处理、探索及可视化等关键环节,并详细展示了聚类分析、PCA、时间序列分析等高级技术。通过实际案例,帮助读者掌握解决复杂问题的方法,提升数据分析技能。使用pandas、matplotlib、seaborn及sklearn等库,提供了丰富的代码示例,便于实践操作。
159 64
|
9天前
|
机器学习/深度学习 数据采集 数据挖掘
解锁 Python 数据分析新境界:Pandas 与 NumPy 高级技巧深度剖析
Pandas 和 NumPy 是 Python 中不可或缺的数据处理和分析工具。本文通过实际案例深入剖析了 Pandas 的数据清洗、NumPy 的数组运算、结合两者进行数据分析和特征工程,以及 Pandas 的时间序列处理功能。这些高级技巧能够帮助我们更高效、准确地处理和分析数据,为决策提供支持。
21 2
|
16天前
|
存储 数据挖掘 数据处理
Python数据分析:Pandas库的高效数据处理技巧
【10月更文挑战第26天】Python 是数据分析领域的热门语言,Pandas 库以其高效的数据处理功能成为数据科学家的利器。本文介绍 Pandas 在数据读取、筛选、分组、转换和合并等方面的高效技巧,并通过示例代码展示其实际应用。
30 2
|
7天前
|
并行计算 数据挖掘 大数据
Python数据分析实战:利用Pandas处理大数据集
Python数据分析实战:利用Pandas处理大数据集
|
7天前
|
数据采集 数据可视化 数据挖掘
利用Python进行数据分析:Pandas库实战指南
利用Python进行数据分析:Pandas库实战指南
|
1月前
|
机器学习/深度学习 数据采集 算法
探索Python科学计算的边界:NumPy、Pandas与SciPy在大规模数据分析中的高级应用
【10月更文挑战第5天】随着数据科学和机器学习领域的快速发展,处理大规模数据集的能力变得至关重要。Python凭借其强大的生态系统,尤其是NumPy、Pandas和SciPy等库的支持,在这个领域占据了重要地位。本文将深入探讨这些库如何帮助科学家和工程师高效地进行数据分析,并通过实际案例来展示它们的一些高级应用。
47 0
探索Python科学计算的边界:NumPy、Pandas与SciPy在大规模数据分析中的高级应用
|
1月前
|
数据采集 数据挖掘 API
Python数据分析加速器:深度挖掘Pandas与NumPy的高级功能
在Python数据分析的世界里,Pandas和NumPy无疑是两颗璀璨的明星,它们为数据科学家和工程师提供了强大而灵活的工具集,用于处理、分析和探索数据。今天,我们将一起深入探索这两个库的高级功能,看看它们如何成为数据分析的加速器。
40 1