PHP 中执行排序与 MySQL 中排序


Posted in PHP onApril 21, 2009

此文首发在 InfoQ 中文站作者:明灵(dragon) , Fenng . Note:要转载的朋友请注意注明这篇文章的第一作者!
这篇文章是dragon 朋友来邮探讨后他做的一个总结。在 DB 中排序还是在 应用程序中排序是个很有趣的话题,dragon 第一份邮件中其实已经总结的很好了,我添加了一点建议而已。现在放上来,与大家共享。这篇文章也投稿到了 InfoQ 中文站

Q:列出在 PHP 中执行排序要优于在 MYSQL 中排序的原因?给一些必须在MYSQL中排序的实例?

A:通常来说,执行效率需要考虑 CPU、内存和硬盘等的负载情况,假定 MYSQL 服务器和 PHP 的服务器都已经按照最适合的方式来配置,那么系统的可伸缩性(Scalability)和用户感知性能(User-perceived Performance)是我们追求的主要目标。在实际运行中,MYSQL 中数据往往以 HASH tables、BTREE 等方式存贮于内存,操作速度很快;同时 INDEX 已经进行了一些预排序;很多应用中,MYSQL 排序是首选。而在应用层(PHP)中排序,也必然在内存中进行,与 MYSQL 相比具有如下优势:

  • 1、 考虑整个网站的可伸缩性和整体性能,在应用层(PHP)中排序明显会降低数据库的负载,从而提升整个网站的扩展能力。而数据库的排序,实际上成本是非常高的,消耗内存、CPU,如果并发的排序很多,DB 很容易到瓶颈。
  • 2、 如果在应用层(PHP)和MYSQL之间还存在数据中间层,合理利用,PHP会有更好的收益。
  • 3、 PHP在内存中的数据结构专门针对具体应用来设计,比数据库更为简洁、高效;
  • 4、 PHP不用考虑数据灾难恢复问题,可以减少这部分的操作损耗;
  • 5、 PHP不存在表的锁定问题;
  • 6、 MYSQL中排序,请求和结果返回还需要通过网络连接来进行,而PHP中排序之后就可以直接返回了,减少了网络IO。

至于执行速度,差异应该不会很大,除非应用设计有问题,造成大量不必要的网络IO。另外,应用层要注意PHP 的 Cache 设置,如果超出会报告内部错误;此时要根据应用做好评估,或者调整Cache。具体选择,将取决于具体的应用。

列出一些 PHP 中执行排序更优的情况:

  • 1、 数据源不在 MYSQL 中,存在硬盘、内存或者来自网络的请求等;
  • 2、 数据存在 MYSQL 中,量不大,而且没有相应的索引,此时把数据取出来用PHP排序更快;
  • 3、 数据源来自于多个 MYSQL 服务器,此时从多个 MYSQL 中取出数据,然后在PHP中排序更快;
  • 4、 除了 MYSQL 之外,存在其他数据源,比如硬盘、内存或者来自网络的请求等,此时不适合把这些数据存入 MYSQL 后再排序;

列出一些必须在 MYSQL 中排序的实例:

  • 1、 MYSQL 中已经存在这个排序的索引;
  • 2、 MYSQL 中数据量较大,而结果集需要其中很小的一个子集;比如 1000000 行数据,取TOP 10;
  • 3、 对于一次排序、多次调用的情况,比如统计聚合的情形,可以提供给不同的服务使用,那么在 MYSQL 中排序是首选的。另外,对于数据深度挖掘,通常做法是在应用层做完排序等复杂操作,把结果存入MYSQL即可,便于多次使用。
  • 4、 不论数据源来自哪里,当数据量大到一定的规模后,由于占用内存/Cache 的关系,不再适合 PHP 中排序了;此时把数据复制、导入或者存在 MYSQL ,并用 INDEX 优化,是优于 PHP 的。不过,用 Java,甚至 C++ 来处理这类操作会更好。 [有些类似大数据集聚合或者汇总的数据,在客户端排序得不偿失。当然,也有用类似搜索引擎的思路来解决类似应用的情况。]

从网站整体考虑,就必须加入人力和成本的考虑。假如网站规模和负载较小,而人力有限(人数和能力都可能有限),此时在应用层(PHP)做排序要做不 少开发和调试工作,耗费时间,得不偿失;不如在 DB 中处理,简单快速。对于大规模的网站,电力、服务器的费用很高,在系统架构上精打细算,可以节约大量的费用,是公司持续发展之必要;此时如果能在应用层(PHP) 进行排序并满足业务需求,尽量在应用层进行。

PHP 相关文章推荐
php访问查询mysql数据的三种方法
Oct 09 PHP
php中使用Akismet防止垃圾评论的代码
Jun 10 PHP
php数组函数序列之next() - 移动数组内部指针到下一个元素的位置,并返回该元素值
Oct 31 PHP
PHP爆绝对路径方法收集整理
Sep 17 PHP
采用thinkphp自带方法生成静态html文件详解
Jun 13 PHP
朋友网关于QQ相关的PHP代码(研究QQ的绝佳资料)
Jan 26 PHP
php之static静态属性与静态方法实例分析
Jul 30 PHP
PHP 开发者该知道的 5 个 Composer 小技巧
Feb 03 PHP
php中final关键字用法分析
Dec 07 PHP
php基于dom实现读取图书xml格式数据的方法
Feb 03 PHP
Ajax+PHP实现的分类列表框功能示例
Feb 11 PHP
PHP根据key删除数组中指定的元素
Feb 28 PHP
一个php导出oracle库的php代码
Apr 20 #PHP
php一句话cmdshell新型 (非一句话木马)
Apr 18 #PHP
对squid中refresh_pattern的一些理解和建议
Apr 17 #PHP
PHP 加密与解密的斗争
Apr 17 #PHP
php error_log 函数的使用
Apr 13 #PHP
PHP Document 代码注释规范
Apr 13 #PHP
php pcntl_fork和pcntl_fork 的用法
Apr 13 #PHP
You might like
PHP在XP下IIS和Apache2服务器上的安装
2006/09/05 PHP
PHP strtr() 函数使用说明
2008/11/21 PHP
php 接口类与抽象类的实际作用
2009/11/26 PHP
几个有用的php字符串过滤,转换函数代码
2012/05/01 PHP
php标签云的实现代码
2012/10/10 PHP
深入浅析php中sprintf与printf函数的用法及区别
2016/01/08 PHP
一个小型js框架myJSFrame附API使用帮助
2008/06/28 Javascript
JS+XML 省份和城市之间的联动实现代码
2009/10/14 Javascript
JS 用6N±1法求素数 实例教程
2009/10/20 Javascript
Javascript 去除数组的重复元素
2010/05/04 Javascript
基于jQuery的的一个隔行变色,鼠标移动变色的小插件
2010/07/06 Javascript
jquery中ajax函数执行顺序问题之如何设置同步
2014/02/28 Javascript
动态加载权限管理模块中的Vue组件
2018/01/16 Javascript
Nodejs下使用gm圆形裁剪并合成图片的示例
2018/02/22 NodeJs
详解vue axios用post提交的数据格式
2018/08/07 Javascript
微信小程序外卖选购页实现切换分类与数量加减功能案例
2019/01/15 Javascript
NestJs 静态目录配置详解
2019/03/12 Javascript
Vue递归组件+Vuex开发树形组件Tree--递归组件的简单实现
2019/04/01 Javascript
vue+vant 上传图片需要注意的地方
2021/01/03 Vue.js
[03:23:49]2016.12.17日完美“圣”典全回顾
2016/12/19 DOTA
关于你不想知道的所有Python3 unicode特性
2014/11/28 Python
编写同时兼容Python2.x与Python3.x版本的代码的几个示例
2015/03/30 Python
Python编程之黑板上排列组合,你舍得解开吗
2017/10/30 Python
Python多个装饰器的调用顺序实例解析
2020/05/22 Python
Python函数参数定义及传递方式解析
2020/06/10 Python
基于Python实现下载网易音乐代码实例
2020/08/10 Python
师范生实习的个人自我鉴定
2013/10/20 职场文书
精彩的大学生自我评价
2013/11/17 职场文书
校园报刊亭的创业计划书
2014/01/02 职场文书
写给学生的新学期寄语
2014/01/18 职场文书
校园十佳歌手策划书
2014/01/22 职场文书
外出考察学习心得体会
2016/01/18 职场文书
求职自荐信该如何书写?
2019/06/24 职场文书
判断Python中的Nonetype类型
2021/05/25 Python
解决pytorch读取自制数据集出现过的问题
2021/05/31 Python
python自动获取微信公众号最新文章的实现代码
2022/07/15 Python