PHP优化之批量操作MySQL实例分析


Posted in PHP onApril 23, 2020

本文实例讲述了PHP优化之批量操作MySQL。分享给大家供大家参考,具体如下:

设计一个数据表如下:

create table optimization(
  id INT NOT NULL AUTO_INCREMENT,
  value VARCHAR(10) NOT NULL,
  PRIMARY KEY(id)
);

现在有一个业务需求需要批量插入数据。

先来看看下面这一段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }
  $begin = microtime(true) * 1000;

  $count = 100;
  $stmt = $dbh->prepare('INSERT INTO `optimization` (id, value) VALUES(:id, :value)');
  $stmt->bindParam(':id', $id);
  $stmt->bindParam(':value', $value);
  for ($i = 0; $i < $count; $i++)
  {
    $id = '';
    $value = $i;
    $stmt->execute();
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

经过测试,上面代码运行结果如下:

1、excuted : 7601.4348144531 ms

2、excuted : 7476.4270019531 ms

3、excuted : 7674.4387207031 ms

平均:7584.100179036433 ms

再来看看第二段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }

  $begin = microtime(true) * 1000;
  $dbh->beginTransaction();
  try {
    $count = 100;
    $sql = 'INSERT INTO `optimization` (id, value) VALUES ';
    $sql_arr = array();
    $sql_str = '';
    for ($i = 0; $i < $count; $i++)
    {
      $sql_arr[] = ("('', $i)");
    }
    $sql_str = implode(',', $sql_arr);
    $sql .= $sql_str;
    $stmt = $dbh->prepare($sql);
    $stmt->execute();
    $dbh->commit();
  } catch(Exception $e) {
    $dbh->rollBack();
    echo $e->getMessage() . '<br>';
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

上面这段代码的运行结果如下:

1、excuted : 99.005859375 ms

2、excuted : 103.00610351562 ms

3、excuted : 68.00390625 ms

平均:90.00528971354 ms

##分析 可以看出,在第二段代码中,使用了批量插入,此时的效率比第一段提高了84%。原因如下:

  • 使用第一段代码的时候,因为每一次循环里都执行了一个mysql语句,此时php需要与mysql获得连接,然后再执行mysql语句,然后再断开。这就是第一段代码最主要的时间开销?PHP与MySQL连接的网络传输IO
  • 第一段代码SQL语句解析的次数更多

因此,在第二段代码中,通过合并SQL语句来实现减少SQL语句解析的次数以及PHP与MySQL连接的次数来达到减少网络传输IO的开销。

注意: 1、SQL语句是有长度限制的,因此,在进行SQL语句合并时务必不能超过SQL长度限制,通过设置max_allowed_packet可以修改,默认是1M,测试时修改为8M。

##总结

在进行对数据库的批量操作(如:插入、更新、修改)时,应当尽可能将SQL语句合并后再执行而不是在循环中依次执行。

记录下最近在项目中犯下的一个比较大的错误,以后不能再犯了。以前一直都没有注意到,直到现在真正参与到企业项目中,自己的代码被老大指出错误后才发现自己的错误。学习了。

希望本文所述对大家PHP程序设计有所帮助。

PHP 相关文章推荐
php 图片上添加透明度渐变的效果
Jun 29 PHP
php函数的常用方法及注意之处小结
Jul 10 PHP
基于ubuntu下nginx+php+mysql安装配置的具体操作步骤
Apr 28 PHP
php实现的太平洋时间和北京时间互转的自定义函数分享
Aug 19 PHP
PHP连接access数据库
Mar 27 PHP
PHP file_get_contents函数读取远程数据超时的解决方法
May 13 PHP
PHP aes (ecb)解密后乱码问题
Jun 22 PHP
Yii框架上传图片用法总结
Mar 28 PHP
PHP文件下载实例代码浅析
Aug 17 PHP
thinkPHP多表查询及分页功能实现方法示例
Jul 03 PHP
在thinkphp5.0路径中实现去除index.php的方式
Oct 16 PHP
PHP $O00OO0=urldecode &amp; eval 解密,记一次商业源码的去后门
Sep 13 PHP
Thinkphp 框架扩展之Widget扩展实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之行为扩展原理与实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之标签库驱动原理与用法分析
Apr 23 #PHP
Thinkphp 框架扩展之数据库驱动常用方法小结
Apr 23 #PHP
Thinkphp 框架扩展之类库扩展操作详解
Apr 23 #PHP
TP框架实现上传一张图片和批量上传图片的方法分析
Apr 23 #PHP
php实现将数组或对象写入到文件的方法小结【三种方法】
Apr 22 #PHP
You might like
针对初学PHP者的疑难问答(2)
2006/10/09 PHP
PHP5新特性: 更加面向对象化的PHP
2006/11/18 PHP
php截取字符串函数substr,iconv_substr,mb_substr示例以及优劣分析
2014/06/10 PHP
php上传图片之时间戳命名(保存路径)
2014/08/15 PHP
PHP内置加密函数详解
2016/11/20 PHP
PHP函数积累总结
2019/03/19 PHP
jquery的ajax()函数传值中文乱码解决方法介绍
2012/11/08 Javascript
JS简单计算器实例
2015/01/20 Javascript
javascript页面倒计时实例
2015/07/25 Javascript
js实现的二分查找算法实例
2016/01/21 Javascript
详解JavaScript中数组和字符串的lastIndexOf()方法使用
2016/03/13 Javascript
深入学习js瀑布流布局
2016/10/14 Javascript
JS实现间歇滚动的运动效果实例
2016/12/22 Javascript
详解前后端分离之VueJS前端
2017/05/24 Javascript
javaScript和jQuery自动加载简单代码实现方法
2017/11/24 jQuery
vue2.0使用v-for循环制作多级嵌套菜单栏
2018/06/25 Javascript
vue 1.0 结合animate.css定义动画效果
2018/07/11 Javascript
Nodejs中怎么实现函数的串行执行
2019/03/02 NodeJs
Angular实现svg和png图片下载实现
2019/05/05 Javascript
React传值 组件传值 之间的关系详解
2019/08/26 Javascript
Vue 数组和对象更新,但是页面没有刷新的解决方式
2019/11/09 Javascript
vue prop传值类型检验方式
2020/07/30 Javascript
[01:08:33]OG vs VGJ.T 2018国际邀请赛小组赛BO2 第一场 8.18
2018/08/19 DOTA
python文件和目录操作方法大全(含实例)
2014/03/12 Python
详解Django中Request对象的相关用法
2015/07/17 Python
举例讲解Python设计模式编程中的访问者与观察者模式
2016/01/26 Python
Python 装饰器深入理解
2017/03/16 Python
Python3中的bytes和str类型详解
2019/05/02 Python
python 基于TCP协议的套接字编程详解
2019/06/29 Python
基于python实现简单网页服务器代码实例
2020/09/14 Python
中国跨境海淘网站:考拉海购
2016/08/01 全球购物
英国亚马逊官方网站:Amazon.co.uk
2019/08/09 全球购物
十八大感想感言
2014/02/10 职场文书
邓小平理论心得体会
2014/09/09 职场文书
车队安全员岗位职责
2015/02/15 职场文书
Python与C++中梯度方向直方图的实现
2022/03/17 Python