厉害了,numpy!!!

简介: 厉害了,numpy!!!

几乎所有使用Python处理分析数据的人都用过Pandas,因为实在太方便了,就像Excel一样,但你知道Pandas是基于Numpy开发出来的吗?

Pandas和Numpy的关系类似于国产安卓系统和原生安卓,Numpy提供底层数据结构和算法,搭配数据面板的分析模式,缔造了Pandas。

某种意义上来说,Numpy是Python数据科学领域金字塔尖的库。

有人这样问过。 52e7b92ad299ae71f690591ce639614b.png

这并不让人意外,虽然Numpy没有Pandas知名度高,但Numpy的性能之强大、应用之广会让很多人咋舌,甚至Numpy的论文登上了Nature杂志。 5212878d5b02cb4da134c90de804c5dc.png

阅读和下载地址:https://www.nature.com/articles/s41586-020-2649-2

不清楚底细的人可能会问,到底什么是Numpy?

Numpy是专门用于多维数组和矩阵计算的Python库,Numpy的强大不在于有多少函数方法,而在于其多维数组和矩阵的计算能力和运行效率。

d325f7d0c5347b461886b6325983122b.png

众所周知的商业软件matlab,也是基于多维数组和矩阵计算。

多维数组和矩阵计算最主要的特点是快,非常快。

知道线性代数吧,为了提高性能,有专门的线性代数库(如BLAS、LAPACK、Intel MKL等)对底层的矩阵运算进行了高度优化。

另外,CPU、GPU这些硬件对矩阵运算有很好的支持。

比如说,GPU具有大量的并行处理核心,非常适合执行大规模的矩阵运算。通过使用CUDA或OpenCL等技术,可以充分发挥GPU的并行计算能力。 87f71336610e2847e1146909d951a29e.png

在Numpy创建和使用多维数组很简单,使用array方法即可。 e9b9ce0d4624d6ee38cc04d464630bbd.png

除了多维数组和矩阵计算,从Numpy本身来说,它以下4大特点确保了它的重要地位:

1、可以和Pandas等多种库进行交互

2、拥有各种科学计算API,任你调用

3、Numpy基于C语言开发,速度和C一样快

4、Numpy在Python中使用,操作和Python一样简洁

接下来,我们看看有哪些Python库的底层依赖库是numpy。

依赖代表这些库需要numpy支持才能运行,某种意义上来说,某个库作为依赖库越多代表它越重要。

以numpy作为依赖的部分python库:

  1. Pandas:最出名的数据处理和分析库,使用基于NumPy 的二维数组来分析数据。

470ea33e5f14496a45870da1d9c855c2.png

  1. SciPy:类似于Matlab的数学和工程计算库,SciPy 库建立在 NumPy 之上,使用多维数组来计算。 90a186db243c1882e2ad7126621a2133.png
  2. Matplotlib:Python中功能最齐全的可视化库,也是很多其他可视化库的依赖,它依赖 NumPy 进行数学运算以生成图形。 f35089a6455352439b6bf2332848555a.png
  3. Scikit-learn:拥有各类算法的机器学习库,使用 NumPy 进行数据的快速处理和算法实现。 cc1faeeb15b1c25a9191601645c03418.png
  4. StatsModels:专门用于统计分析的算法库,依赖 NumPy 进行数值计算。 6b5825987a4cde25036ce754af616bd7.png
  5. TensorFlow PyTorch:最最出名的两个深度学习框架,各种大模型都是靠它们跑出来的,但是它们在底层使用 NumPy 进行张量操作。 ad3a947cfa8e2c7ce655c00ac864ad0e.png

63d2a11260f8ce385e429a0b16a0ea10.png

  1. OpenCV:家喻户晓的计算机视觉,使用 NumPy 数组进行图像处理。 37b3f42ca1b20e2575e5a1bb88089852.png
  2. NetworkX:图形网络分析库,用于复杂网络创建、操作和使用 ,使用NumPy 进行网络分析。 37e2ff249c041dde99d1454be25867fc.png

可以看到,很多主流的数据科学、机器学习、深度学习库都是靠numpy依赖,基于多维数组来进行计算,可见numpy有多么的重要,说它是数据科学的顶级库也不为过。

以下是一些numpy的基础函数和方法介绍:

  1. np.array(object, dtype=None, copy=True, order='K', subok=False, ndmin=0):
  • 创建一个 NumPy 数组。
  1. np.zeros(shape, dtype=float, order='C'):
  • 返回一个给定形状和数据类型的数组,其中所有元素都为 0。
  1. np.ones(shape, dtype=None, order='C'):
  • 返回一个给定形状和数据类型的数组,其中所有元素都为 1。
  1. np.empty(shape, dtype=float, order='C'):
  • 返回一个未初始化的数组,其元素值是随机的。
  1. np.arange(start, stop=None, step=1, dtype=None):
  • 返回一个与 Python 的 range 类似的数组,包含从 start 开始到 stop 结束(不包括 stop)的值,步长为 step
  1. np.linspace(start, stop, num=50, endpoint=True, retstep=False, dtype=None, axis=0):
  • 返回一个数组,其中包含 num 个从 startstop 的等间隔的点。
  1. np.reshape(a, newshape, order='C'):
  • 将数组 a 重塑为 newshape 指定的形状。
  1. np.transpose(a, axes=None):
  • 转置数组,可选地按照 axes 指定的轴顺序。
  1. np.dot(a, b, out=None):
  • 矩阵乘法,计算两个数组的点积。
  1. np.vstack(tup):
  • 垂直堆叠数组,等价于 np.concatenate(tup, axis=0)
相关文章
|
4月前
|
Python
numpy快速使用
numpy快速使用
43 6
numpy快速使用
|
23天前
|
Python
NumPy 教程 之 NumPy 算术函数 1
本教程介绍NumPy中的基本算术函数,如加(add())、减(subtract())、乘(multiply())及除(divide())。示例展示了两个数组(一个3x3矩阵与一数组[10,10,10])间的运算。值得注意的是,参与运算的数组需有相同形状或可按照NumPy的广播规则进行扩展。此外Numpy还提供了许多其他的算术函数以满足复杂计算需求。
35 7
|
21天前
|
Python
NumPy 教程 之 NumPy 算术函数 2
NumPy 教程 之 NumPy 算术函数 2
29 3
|
4月前
|
Python
numpy
numpy
33 4
|
20天前
|
vr&ar 索引 Python
Numpy学习笔记之Numpy练习
Numpy学习笔记之Numpy练习
|
22天前
|
Python
NumPy 教程 之 NumPy 算术函数 4
本教程详细介绍了NumPy库中的算术函数,包括基本的加、减、乘、除操作:add(),subtract(),multiply() 和 divide(),需确保处理的数组形状一致或满足广播规则。通过`numpy.mod()`及`numpy.remainder()`函数示例展示了如何计算数组元素间的除法余数。两个函数在此例中产生相同结果:对于数组 [10,20,30] 和 [3,5,7],输出余数分别为 [1,0,2]。
39 3
|
22天前
|
Serverless Python
NumPy 教程 之 NumPy 算术函数 3
本教程详细解释了NumPy库中的算术函数,特别是`numpy.power()`函数的应用。通过示例展示如何利用此函数计算数组中每个元素的幂。重要的是,参与运算的数组需形状相同或满足广播规则。例如,对数组`[10, 100, 1000]`的每个元素求平方和以另一个数组`[1, 2, 3]`为指数的幂。
25 0
|
2月前
|
存储 索引 Python
NumPy 教程 之 NumPy Ndarray 对象 4
**NumPy的ndarray对象是核心特征,是同类型元素的多维数组。它包括数据指针、数据类型(dtype)、形状元组和跨度元组。创建ndarray使用`numpy.array()`,参数如object(输入数据)、dtype(数据类型)等。例如:`a = np.array([[1, 2], [3, 4]])`创建了一个二维数组。**
20 2
|
2月前
|
存储 索引 Python
NumPy 教程 之 NumPy Ndarray 对象 1
**NumPy的ndarray对象是多维数组,存储相同类型数据,以0开始索引。包含数据指针、dtype(描述数据类型)、shape(表示维度大小的元组)和stride(控制元素间步长)。创建ndarray使用`numpy.array()`函数。**
18 3
|
2月前
|
存储 索引 Python
NumPy 教程 之 NumPy Ndarray 对象 3
**NumPy的ndarray对象是多维数组,存储相同类型数据,用0开始的索引访问。包括数据指针、dtype、形状和跨度元组。创建数组用`np.array()`,参数控制数据类型、复制、排列和维度。例如:`a = np.array([1,2,3])`。输出:`[1 2 3]`。**
18 1