让Python代码更快运行的5种方法


Posted in Python onJune 21, 2015

不论什么语言,我们都需要注意性能优化问题,提高执行效率。选择了脚本语言就要忍受其速度,这句话在某种程度上说明了Python作为脚本语言的不足之处,那就是执行效率和性能不够亮。尽管Python从未如C和Java一般快速,但是不少Python项目都处于开发语言领先位置。
Python很简单易用,但大多数人使用Python都知道在处理密集型cpu工作时,它的数量级依然低于C、Java和JavaScript。但不少第三方不愿赘述Python的优点,而是决定自内而外提高其性能。如果你想让Python在同一硬件上运行得更快,你有两个基本选择,而每个都会有一个缺点:
·您可以创建一个默认运行时所使用的替代语言(CPython的实现)——一个主要的任务,但它最终只会是CPython的一个简易替代者。
·您也可以利用某些速度优化器重写现有Python代码,这意味着程序员要花更多精力编写代码,但不需要在运行时加以改变。
如何进行Python性能优化,是本文探讨的主题。下面是五个方法可以在某些方面提高Python代码的性能和执行效率。

PyPy

在选择CPython的简易替代语言时,PyPy无疑是最佳之选(如Quora就是由它编写而成)。由于与现有Python代码保持高度兼容性,PyPy也是默认程序运行时的一个很好选择。
PyPy使用了Just-in-Time(JIT)即时编译器,即动态编译器,与静态编译器(如gcc,java等)不同,它是利用程序运行的过程的数据进行优化,拥有同谷歌Chrome V8 JavaScript引擎相同的语言加速技术。本月初,最新版本PyPy 2.5即将发布,此版本会有一系列的性能改进,提供更全面的如NumPy的支持,用于加速Python性能的共享库。
Python 3.x必须由单独的PyPy3项目构建而成。不过,对于边缘语言特性 爱好者来说,尽管预期支持3.3,但实际此版本最多仅支持Python3.2.4及以下版本。
相关链接:http://pypy.org/

Pyston

Pyston是一款Dropbox推出的新的基于JIT的Python实现,使用LLVM编译器实现代码解析与转换。与PyPy相比,Pyston仍处于初级阶段,目前最新版本为Pyston 0.2版,支持有限子集语言的相关特性。Pyston的主要工作包括支持语言的核心功能及提升关键指标性能到一个可接受的水平。不久后,Pyston就可以被认为是远程生产就绪语言。
相关链接:https://github.com/dropbox/pyston

Nuitka

Nuitka 是一个Python的替代品,一些团队正用它做完全的Python编译工具,并尝试将Python代码转译为其它可高速运行的编程语言。Nuitka(nuitka.net)可以将python代码转换为C++代码,然后编译为可执行文件,并通过直接调用python的api的方式实现从解析语言到编译语言的转换,并且在转换到C++的过程中直接使用python的解释器,可以保证100%的语法兼容。虽然这限制了它的可移植性,但不可否认这个转换的速度获得了肯定。
相关链接:http://nuitka.net/

Cython

Cython是Python 的C语言扩展。准确说Cython是单独的一门语言,专门用来写在Python里面import用的扩展库。实际上Cython的语法基本上跟Python一致,而Cython有专门的编译器:先将 Cython代码转变成C(自动加入了一大堆的C-Python API),然后使用C编译器编译出最终的Python可调用的模块。不过Cython的缺点是,你并不能真正编写Python代码,这样一来,现有代码将不会完全自动转移成功。
也就是说,Cython在提速方面有很大优势,它是一个用来快速生成Python扩展模块(extention module)的工具。而在Cython,C里的类型,如int,float,long,char*等都会在必要的时候自动转成python对象,或者从python对象转成C类型,在转换失败时会抛出异常,这正是Cython最神奇的地方。另外,Cython对回调函数的支持也很好。总之,如果你有写python扩展模块的需求,那么Cython真的是一个很好的工具。
相关链接:http://cython.org/

Numba

Numba综合了前两种方法,是Cython的竞争项目。同样的,numba把Python源码通过LLVMPy生成JIT后的.so文件来加速。不同点在于,Numba是以JIT为主的,加速对源码的侵入性较小。而Cython则重点在加速高性能Python模块的开发上,不依赖LLVMPy项目。此外numba还很不成熟,目前兼容性相当差。
相关链接:http://numba.pydata.org/

Python创始人Guido van Rossum坚信Python的许多性能问题可以归结为语言的使用不当。例如,对于CPU消耗过高的处理,可以通过一些方法来加速Python运行——使用NumPy、使用多处理器扩展、或借助外部C代码从而避免全局解释器锁(GIL)——Python缓慢的根源。但由于在Python中还没有可行的GIL替代语言,Python仍将在短期落后于其他语言——甚至可能更长时间。

Python 相关文章推荐
python网络编程之TCP通信实例和socketserver框架使用例子
Apr 25 Python
浅谈python中set使用
Jun 30 Python
Python3.4实现远程控制电脑开关机
Feb 22 Python
python的dataframe和matrix的互换方法
Apr 11 Python
Python实现简单的文本相似度分析操作详解
Jun 16 Python
python截取两个单词之间的内容方法
Dec 25 Python
浅谈python多线程和多线程变量共享问题介绍
Apr 17 Python
python3用PyPDF2解析pdf文件,用正则匹配数据方式
May 12 Python
keras模型保存为tensorflow的二进制模型方式
May 25 Python
python利用paramiko实现交换机巡检的示例
Sep 22 Python
怎么解决pycharm license Acti的方法
Oct 28 Python
总结几个非常实用的Python库
Jun 26 Python
Python文件读取的3种方法及路径转义
Jun 21 #Python
Python多线程和队列操作实例
Jun 21 #Python
Python中type的构造函数参数含义说明
Jun 21 #Python
Python base64编码解码实例
Jun 21 #Python
python在控制台输出进度条的方法
Jun 20 #Python
python压缩文件夹内所有文件为zip文件的方法
Jun 20 #Python
Python写的一个简单监控系统
Jun 19 #Python
You might like
十天学会php之第三天
2006/10/09 PHP
无数据库的详细域名查询程序PHP版(1)
2006/10/09 PHP
php中计算未知长度的字符串哪个字符出现的次数最多的代码
2012/08/14 PHP
关于PHP语言构造器介绍
2013/07/08 PHP
PHP多个文件上传到服务器实例
2014/10/29 PHP
如何在旧的PHP系统中使用PHP 5.3之后的库
2015/12/02 PHP
php页面跳转session cookie丢失导致不能登录等问题的解决方法
2016/12/12 PHP
PHP实现通过二维数组键值获取一维键名操作示例
2019/10/11 PHP
RR vs IO BO3 第二场2.13
2021/03/10 DOTA
javascript实现的一个带下拉框功能的文本框
2014/05/08 Javascript
前端主流框架vue学习笔记第一篇
2017/07/26 Javascript
Node.js 使用递归实现遍历文件夹中所有文件
2017/09/18 Javascript
使用node打造自己的命令行工具方法教程
2018/03/26 Javascript
微信小程序使用map组件实现检索(定位位置)周边的POI功能示例
2019/01/23 Javascript
Vue Cli 3项目使用融云IM实现聊天功能的方法
2019/04/19 Javascript
解决Mint-ui 框架Popup和Datetime Picker组件滚动穿透的问题
2020/11/04 Javascript
vue-cli 3如何使用vue-bootstrap-datetimepicker日期插件
2021/02/20 Vue.js
[01:43]3.19DOTA2发布会 三代刀塔人第三代
2014/03/25 DOTA
python 简易计算器程序,代码就几行
2009/08/29 Python
跟老齐学Python之编写类之一创建实例
2014/10/11 Python
Python设计模式之代理模式实例详解
2019/01/19 Python
对Python协程之异步同步的区别详解
2019/02/19 Python
python scatter散点图用循环分类法加图例
2019/03/19 Python
Django使用消息提示简单的弹出个对话框实例
2019/11/15 Python
python支持多线程的爬虫实例
2019/12/21 Python
基于MSELoss()与CrossEntropyLoss()的区别详解
2020/01/02 Python
PageFactory设计模式基于python实现
2020/04/14 Python
屈臣氏菲律宾官网:Watsons菲律宾
2020/06/30 全球购物
大四学年自我鉴定
2013/11/13 职场文书
遥感技术与仪器求职信
2014/02/22 职场文书
社区志愿者活动方案
2014/08/18 职场文书
党支部群众路线整改措施思想汇报
2014/10/10 职场文书
jquery插件实现搜索历史
2021/04/24 jQuery
ajax请求前端跨域问题原因及解决方案
2021/10/16 Javascript
分析Python list操作为什么会错误
2021/11/17 Python
CentOS MySql8 远程连接实战
2022/04/19 MySQL