Python3:只用一个装饰器,就让python的运行速度提升200倍!!

简介: Python3:只用一个装饰器,就让python的运行速度提升200倍!!

1、引言

小屌丝:鱼哥,我今天被鄙视了

小鱼:因为你的颜值被鄙视了??

小屌丝:咱还能正常聊天吗??

小鱼:好吧,我已经很正经的说话了,那你说吧,因为啥被鄙视了?

小屌丝:今天一个小菜鸟说C语言是世界上运行速度最快的语言,我非常不服气~~

小鱼:那有啥不服气的,我都觉得这话说得没啥毛病。

小屌丝:鱼哥,小姐姐说谁的速度快,就跟谁YYSX。

小鱼:那…这… 我赞同,我也表示不不服。

2、Numba

关于Numba的详细文档,点击Numba传送门即被可传送。

但是文档归文档,我们还是要简单的说一下Numba。

2.1 简介

numba 是一款可以将 python 函数编译为机器代码的JIT编译器,经过 numba 编译的python 代码(仅限数组运算),其运行速度可以接近 C 或 FORTRAN 语言。

小屌丝:看样子很厉害的哦,那使用起来,是不是很难呢?

小鱼:不难不难,到底有多容易,请往下看:


不要:

不需要替换Python解析器

不需要单独编译

不需要安装C/C++编译器

一需要:

将 Numba 提供的装饰器放在 Python 函数上面就行

小屌丝:哎哟~总结的还挺到位。

小鱼:没事别说话,打断我思路了都!!

2.2 安装

在撸码前,需要确认,是否已经有numba这个库,

如果没有的话,那我们回想一下,有几种方法呢????

一行代码导入Python所有库

pip install 手动安装

pip.main自动安装

不管哪种方法,能安装上就是可行的。

在这里,小鱼就直接举例单独安装:

pip install numba

详细可参考:

Python3:我低调的只用一行代码,就导入Python所有库!》;

Python3,选择Python自动安装第三方库,从此跟pip说拜拜!!

2.3 代码实例

安装完numba库,那就直接上代码,展示一下速度…

看看能不能比我们的苏神跑的快!

实例一:

我们看看调用jit的样子

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ
from numba import jit
import random
# 调用jit装饰器
@jit(nopython=True)
def mot_pi(nsamples):
    acc =0
    for i in range(nsamples):
        x = random.random()
        y = random.random()
        if (x ** 2 + y ** 2) <1.0 :
            acc +=1
    return 8.0 * acc /nsamples

实例二

Numba 是专为科学计算而设计的,在与 NumPy 一起使用时,Numba 会为不同的数组数据类型生成专门的代码,以优化性能为主,

上代码:

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ
@numba.jit(nopython=True, parallel=True)
def logistic_regress(X, Y, w, iterations):
    for i in range(iterations):
        w -= np.dot(((1.0 /
              (1.0 + np.exp(-Y * np.dot(X, w)))
              - 1.0) * Y), X)
    return w

小屌丝:这个…我看不懂…

小鱼:看不懂啊,没关系,毕竟不是每个人都对科学计算有兴趣。

小屌丝:你这是在侮(xiu)辱我!!!

小鱼:你不配~ ~

如果大家看不懂这个实例,没事没事,别灰心,

接下来,我们就来搞个大一点的事情。

3、 代码实战

上面的代码,就是一个热身了~ ~

接下来,我们就用正儿八经的例子,看看Numba的运行速度有多快。

有了苏神的速度,还担心妹子不跟咱YYXS吗!!

举个例子

我们使用和不使用Numba,来找出1000个W以内所有的素数。

3.1 不使用Numba

我们不使用Numba,来看看花费多长时间。

上代码

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ
import math
import time
def is_prime(num):
    if num == 2:
        return True
    if num <= 1 or not num % 2:
        return False
    for div in range(3, int(math.sqrt(num) + 1), 2):
        if not num % div:
            return False
    return True
def run_program(N):
    total = 0
    for i in range(N):
        if is_prime(i):
            total += 1
    return total
if __name__ == "__main__":
    N = 10000000
    start = time.time()
    total = run_program(N)
    end = time.time()
    print(f"1000W以内所有的素数是: {total}")
    print(f"耗时: {end - start}s")

行结果

1000W以内所有的素数是: 664579
耗时: 245.93426966667175s

小屌丝:好吧,这运行速度,确实有点…

小鱼:别灰心啊,我们不是还有Numba吗。

3.2 使用Numba

我们使用Numba,看看花费多长时间。

上代码

# -*- coding:utf-8 -*-
# @Time   : 2021-08-08
# @Author : carl_DJ
import math
import time
from numba import njit
# @njit 相当于 @jit(nopython=True) 
@njit
def is_prime(num):
    if num == 2:
        return True
    if num <= 1 or not num % 2:
        return False
    for div in range(3, int(math.sqrt(num) + 1), 2):
        if not num % div:
            return False
    return True
# #普通循环计算,
# @njit
# def run_program(N):
#     total = 0
#     #普通range循环处理
#     for i in range(N):
#         if is_prime(i):
#             total += 1
#     return total
#使用Numba的prange来进行并发循环计算
@njit(parallel = True)
def run_program(N):
    total = 0
    #使用Numba提供的prange参数来进行并行计算
    for i in prange(N):
        if is_prime(i):
            total += 1
    return total
if __name__ == "__main__":
    N = 10000000
    start = time.time()
    total = run_program(N)
    end = time.time()
    print(f"1000W以内所有的素数是: {total}")
    print(f"耗时: {end - start}s")

运行结果

  • 未使用Numba的prange运行结果,如下:
1000W以内所有的素数是: 664579
耗时: 11.453454494476318s

使用Numba的prange运行结果,如下:

total prime num is 664579
cost 5.30582857131958s

小屌丝:我的天啊, 这么神奇吗~

小鱼:必须的。

小屌丝:鱼哥,鱼哥,它是怎么做到的??

小鱼:嗯,我们来看看官方文档怎么解释的。

官方文档解释:

它读取装饰函数的 Python 字节码,并将其与有关函数输入参数类型的信息结合起来,分析和优化代码,最后使用编译器库(LLVM)针对你的 CPU 生成量身定制的机器代码。每次调用函数时,都会使用此编译版本,

小屌丝:原来如此…看来我今晚和小姐姐YYSX 是有戏了。

小鱼:就这点出息了!!!


4、总结

虽然Python是动态语言,有全局解释器锁,比其他静态语言要慢,

但是,通过今天小鱼分享的Numba,是不是把你心中那一团火又燃烧了。

说归说,闹归闹,官方文档最重要!

所以,关于更多的Numba的知识,还请异步到官方文档

倒数三个数,开始上链接,宝宝们准备好。

3

2

1

官网文档:http://numba.pydata.org/numba-doc/latest/index.html

目录
相关文章
|
1月前
|
设计模式 前端开发 Shell
Python装饰器是什么?
装饰器是Python中用于动态修改函数、方法或类功能的工具,无需改变原代码。通过将函数作为参数传递并返回新函数,装饰器可以在原函数执行前后添加额外逻辑。例如,使用`@logger`装饰器可以打印函数调用日志,而`@timethis`则可用于计算函数执行时间。为了保持被装饰函数的元信息(如`__name__`和`__doc__`),可使用`functools.wraps`装饰器。此外,带参数的装饰器可通过嵌套函数实现,如`@timeitS(2)`,以根据参数条件输出特定信息。
90 59
|
1月前
|
测试技术 数据库 Python
Python装饰器实战:打造高效性能计时工具
在数据分析中,处理大规模数据时,分析代码性能至关重要。本文介绍如何使用Python装饰器实现性能计时工具,在不改变现有代码的基础上,方便快速地测试函数执行时间。该方法具有侵入性小、复用性强、灵活度高等优点,有助于快速发现性能瓶颈并优化代码。通过设置循环次数参数,可以更准确地评估函数的平均执行时间,提升开发效率。
106 61
Python装饰器实战:打造高效性能计时工具
|
2月前
|
Shell 开发工具 Python
如何在vim里直接运行python程序
如何在vim里直接运行python程序
|
2月前
|
数据挖掘 vr&ar C++
让UE自动运行Python脚本:实现与实例解析
本文介绍如何配置Unreal Engine(UE)以自动运行Python脚本,提高开发效率。通过安装Python、配置UE环境及使用第三方插件,实现Python与UE的集成。结合蓝图和C++示例,展示自动化任务处理、关卡生成及数据分析等应用场景。
178 5
|
2月前
|
缓存 数据安全/隐私保护 Python
python装饰器底层原理
Python装饰器是一个强大的工具,可以在不修改原始函数代码的情况下,动态地增加功能。理解装饰器的底层原理,包括函数是对象、闭包和高阶函数,可以帮助我们更好地使用和编写装饰器。无论是用于日志记录、权限验证还是缓存,装饰器都可以显著提高代码的可维护性和复用性。
50 5
|
2月前
|
存储 缓存 Python
Python中的装饰器深度解析与实践
在Python的世界里,装饰器如同一位神秘的魔法师,它拥有改变函数行为的能力。本文将揭开装饰器的神秘面纱,通过直观的代码示例,引导你理解其工作原理,并掌握如何在实际项目中灵活运用这一强大的工具。从基础到进阶,我们将一起探索装饰器的魅力所在。
|
2月前
|
Python
探索Python中的装饰器:简化代码,增强功能
在Python的世界里,装饰器就像是给函数穿上了一件神奇的外套,让它们拥有了超能力。本文将通过浅显易懂的语言和生动的比喻,带你了解装饰器的基本概念、使用方法以及它们如何让你的代码变得更加简洁高效。让我们一起揭开装饰器的神秘面纱,看看它是如何在不改变函数核心逻辑的情况下,为函数增添新功能的吧!
|
2月前
|
测试技术 开发者 Python
探索Python中的装饰器:从入门到实践
装饰器,在Python中是一块强大的语法糖,它允许我们在不修改原函数代码的情况下增加额外的功能。本文将通过简单易懂的语言和实例,带你一步步了解装饰器的基本概念、使用方法以及如何自定义装饰器。我们还将探讨装饰器在实战中的应用,让你能够在实际编程中灵活运用这一技术。
50 7
|
2月前
|
程序员 测试技术 数据安全/隐私保护
深入理解Python装饰器:提升代码重用与可读性
本文旨在为中高级Python开发者提供一份关于装饰器的深度解析。通过探讨装饰器的基本原理、类型以及在实际项目中的应用案例,帮助读者更好地理解并运用这一强大的语言特性。不同于常规摘要,本文将以一个实际的软件开发场景引入,逐步揭示装饰器如何优化代码结构,提高开发效率和代码质量。
74 6
|
2月前
|
测试技术 开发者 Python
深入理解Python装饰器:从基础到高级应用
本文旨在为读者提供一个全面的Python装饰器指南,从其基本概念讲起,逐步深入探讨其高级应用。我们将通过实例解析装饰器的工作原理,并展示如何利用它们来增强函数功能、控制程序流程以及实现代码的模块化。无论你是Python初学者还是经验丰富的开发者,本文都将为你提供宝贵的见解和实用的技巧,帮助你更好地掌握这一强大的语言特性。
75 4

热门文章

最新文章

推荐镜像

更多