PHP企业级应用之常见缓存技术篇


Posted in PHP onJanuary 27, 2011

普遍缓存技术
数据缓存:这里所说的数据缓存是指数据库查询缓存,每次访问页面的时候,都会先检测相应的缓存数据是否存在,如果不存在,就连接数据库,得到数据, 并把查询结果序列化后保存到文件中,以后同样的查询结果就直接从缓存表或文件中获得。
用的最广的例子看Discuz的搜索功能,把结果ID缓存到一个表中,下次搜索相同关键字时先搜索缓存表。
举个常用的方法,多表关联的时候,把附表中的内容生成数组保存到主表的一个字段中,需要的时候数组分解一下,这样的好处是只读一个表,坏处就是两个 数据同步会多不少步骤,数据库永远是瓶颈,用硬盘换速度,是这个的关键点。
页面缓存:
每次访问页面的时候,都会先检测相应的缓存页面文件是否存在,如果不存在,就连接数据库,得到数据,显示页面并同时生成缓存页面文件,这样下次访问 的时候页面文件就发挥作用了。(模板引擎和网上常见的一些缓存类通常有此功能)
时间触发缓存:
检查文件是否存在并且时间戳小于设置的过期时间,如果文件修改的时间戳比当前时间戳减去过期时间戳大,那么就用缓存,否则更新缓存。
内容触发缓存:
当插入数据或更新数据时,强制更新缓存。
静态缓存:
这里所说的静态缓存是指静态化,直接生成HTML或xml等文本文件,有更新的时候重生成一次,适合于不太变化的页面,这就不说了。
以上内容是代码级的解决方案,我直接CP别的框架,也懒得改,内容都差不多,很容易就做到,而且会几种方式一起用,但下面的内容是服务器端的缓存方 案,非代码级的,要有多方的合作才能做到
内存缓存:
Memcached是高性能的,分布式的内存对象缓存系统,用于在动态应用中减少数据库负载,提升访问速度。
这里说下Memcached的例子:

<?php 
$memcache = new Memcache; 
$memcache->connect(‘localhost', 11211) or die (“Could not connect”); 
$version = $memcache->getVersion(); 
echo “Server's version: “.$version.”\n”; 
$tmp_object = new stdClass; 
$tmp_object->str_attr = ‘test'; 
$tmp_object->int_attr = 123; 
$memcache->set(‘key', $tmp_object, false, 10) or die (“Failed to save data at the server”); 
echo “Store data in the cache (data will expire in 10 seconds)\n”; 
$get_result = $memcache->get(‘key'); 
echo “Data from the cache:\n”; 
var_dump($get_result); 
?>

读库的例子:
<?php 
$sql = ‘SELECT * FROM users'; 
$key = md5($sql); //memcached 对象标识符 
if ( !($datas = $mc->get($key)) ) { 
// 在 memcached 中未获取到缓存数据,则使用数据库查询获取记录集。 
echo “n”.str_pad(‘Read datas from MySQL.', 60, ‘_').”n”; 
$conn = mysql_connect(‘localhost', ‘test', ‘test'); 
mysql_select_db(‘test'); 
$result = mysql_query($sql); 
while ($row = mysql_fetch_object($result)) 
$datas[] = $row; 
// 将数据库中获取到的结果集数据保存到 memcached 中,以供下次访问时使用。 
$mc->add($key, $datas); 
} else { 
echo “n”.str_pad(‘Read datas from memcached.', 60, ‘_').”n”; 
} 
var_dump($datas); 
?>

php的缓冲器:
有eaccelerator, apc, phpa,xcache,这个这个就不说了吧,搜索一堆一堆的,自己看啦,知道有这玩意就OK
MYSQL缓存:
这也算非代码级的,经典的数据库就是用的这种方式,看下面的运行时间,0.09xxx之类的
我贴段根据蓝色那家伙修改后部分my.ini 吧,2G的MYISAM表可以在0.05S左右,据说他前后改了有快一年
[client]
……
default-character-set=gbk
default-storage-engine=MYISAM
max_connections=600
max_connect_errors=500
back_log=200
interactive_timeout=7200
query_cache_size=64M
……
table_cache=512
……
myisam_max_sort_file_size=100G
myisam_max_extra_sort_file_size=100G
myisam_sort_buffer_size=128M
key_buffer_size=1024M
read_buffer_size=512M
……
thread_concurrency=8
基于反向代理的Web缓存:
如Nginx,SQUID,mod_PRoxy(apache2以上又分为mod_proxy和mod_cache)
NGINX的例子
<nginx.conf> 
#user nobody; 
worker_processes 4; 
error_log logs/error.log crit; 
pid logs/nginx.pid; 
worker_rlimit_nofile 10240; 
events { 
use epoll; 
worker_connections 51200; 
} 
http { 
include mime.types; 
default_type application/octet-stream; 
sendfile on; 
keepalive_timeout 65; 
tcp_nodelay on; 
# server pool 
upstream bspfrontsvr { 
server 10.10.10.224:80 weight=1; 
server 10.10.10.221:80 weight=1; 
} 
upstream bspimgsvr { 
server 10.10.10.201:80 weight=1; 
} 
upstream bspstylesvr { 
server 10.10.10.202:80 weight=1; 
} 
upstream bsphelpsvr { 
server 10.10.10.204:80 weight=1; 
} 
upstream bspwsisvr { 
server 10.10.10.203:80 weight=1; 
} 
upstream bspadminsvr { 
server 10.10.10.222:80 weight=1; 
} 
upstream bspbuyersvr { 
server 10.10.10.223:80 weight=1; 
} 
upstream bspsellersvr { 
server 10.10.10.225:80 weight=1; 
} 
upstream bsploginsvr { 
server 10.10.10.220:443 weight=1; 
} 
upstream bspregistersvr { 
server 10.10.10.220:80 weight=1; 
} 
log_format test_com ‘$remote_addr ? $remote_user [$time_local] “$request” ‘ 
‘$status $body_bytes_sent “$http_referer” “$http_user_agent” ‘; 
#——————————————————————? 
#img.test.com 
server { 
listen 10.10.10.230:80; 
server_name img.test.com; 
location / { 
proxy_pass http://bspimgsvr; 
include proxy_setting.conf; 
} 
access_log logs/img.log test_com; 
} 
#style.test.com 
server { 
listen 10.10.10.230:80; 
server_name style.test.com; 
location / { 
proxy_pass http://bspstylesvr; 
include proxy_setting.conf; 
} 
access_log logs/style.log test_com; 
} 
#help.test.com 
server { 
listen 10.10.10.230:80; 
server_name help.test.com; 
location / { 
proxy_pass http://bsphelpsvr; 
include proxy_setting.conf; 
} 
access_log logs/help.log test_com; 
} 
#admin.test.com 
server { 
listen 10.10.10.230:80; 
server_name admin.test.com; 
location / { 
proxy_pass http://bspadminsvr; 
include proxy_setting.conf; 
} 
access_log logs/admin.log test_com; 
} 
#buyer.test.com 
server { 
listen 10.10.10.230:80; 
server_name buyer.test.com; 
location / { 
proxy_pass http://bspbuyersvr; 
include proxy_setting.conf; 
} 
access_log logs/buyer.log test_com; 
} 
#seller.test.com 
server { 
listen 10.10.10.230:80; 
server_name seller.test.com; 
location / { 
proxy_pass http://bspsellersvr; 
include proxy_setting.conf; 
} 
access_log logs/seller.log test_com; 
} 
#wsi.test.com 
server { 
listen 10.10.10.230:80; 
server_name wsi.test.com; 
location / { 
proxy_pass http://bspwsisvr; 
include proxy_setting.conf; 
} 
access_log logs/wsi.log test_com; 
} 
#www.test.com 
server { 
listen 10.10.10.230:80; 
server_name www.test.com *.test.com; 
location ~ ^/NginxStatus/ { 
stub_status on; 
access_log off; 
} 
location / { 
proxy_pass http://bspfrontsvr; 
include proxy_setting.conf; 
} 
access_log logs/www.log test_com; 
error_page 500 502 503 504 /50x.html; 
location = /50x.html { 
root html; 
} 
} 
#login.test.com 
server { 
listen 10.10.10.230:443; 
server_name login.test.com; 
ssl on; 
ssl_certificate cert.pem; 
ssl_certificate_key cert.key; 
ssl_session_timeout 5m; 
ssl_protocols SSLv2 SSLv3 TLSv1; 
ssl_ciphers ALL:!ADH:!EXPORT56:RC4+RSA:+HIGH:+MEDIUM:+LOW:+SSLv2:+EXP; 
ssl_prefer_server_ciphers on; 
location / { 
proxy_pass https://bsploginsvr; 
include proxy_setting.conf; 
} 
access_log logs/login.log test_com; 
} 
#login.test.com for register 
server { 
listen 10.10.10.230:80; 
server_name login.test.com; 
location / { 
proxy_pass http://bspregistersvr; 
include proxy_setting.conf; 
} 
access_log logs/register.log test_com; 
} 
} 
<conf/proxy_setting.conf> 
proxy_redirect off; 
proxy_set_header Host $host; 
proxy_set_header X-Real-IP $remote_addr; 
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 
client_max_body_size 10m; 
client_body_buffer_size 128k; 
proxy_connect_timeout 90; 
proxy_send_timeout 90; 
proxy_read_timeout 90; 
proxy_buffer_size 4k; 
proxy_buffers 4 32k; 
proxy_busy_buffers_size 64k; 
proxy_temp_file_write_size 64k; 
mod_proxy的例子: 
<VirtualHost *> 
ServerName www.zxsv.com 
ServerAdmin admin@zxsv.com 
# reverse proxy setting 
ProxyPass / http://www.zxsv.com:8080/ 
ProxyPassReverse / http://www.zxsv.com:8080/ 
# cache dir root 
CacheRoot “/var/www/proxy” 
# max cache storage 
CacheSize 50000000 
# hour: every 4 hour 
CacheGcInterval 4 
# max page expire time: hour 
CacheMaxExpire 240 
# Expire time = (now ? last_modified) * CacheLastModifiedFactor 
CacheLastModifiedFactor 0.1 
# defalt expire tag: hour 
CacheDefaultExpire 1 
# force complete after precent of content retrived: 60-90% 
CacheForceCompletion 80 
CustomLog /usr/local/apache/logs/dev_access_log combined 
</VirtualHost>

而SQUID的例子我就不说明了,这方面网上有写的太多,大家自己搜索一下
DNS轮询:
BIND是一款开放源码的DNS服务器软件,这个要说起来就大了,自己搜索去,大家知道有这个东西就行了。
我知道的有chinacache 等大站就是这样做的,说简单点就是多服务器啦,把同一个页面或文件缓存到不同的服务器上,按南北自动解析到相关的服务器中。
PHP 相关文章推荐
PHP Header用于页面跳转要注意的几个问题总结
Oct 03 PHP
PHP 多进程 解决难题
Jun 22 PHP
php将数据库导出成excel的方法
May 07 PHP
php实现无限级分类实现代码(递归方法)
Jan 01 PHP
PHP中文件读、写、删的操作(PHP中对文件和目录操作)
Mar 06 PHP
php+mysqli实现将数据库中一张表信息打印到表格里的方法
Jan 28 PHP
php语言中使用json的技巧及json的实现代码详解
Oct 27 PHP
php+ajax制作无刷新留言板
Oct 27 PHP
PHP 中使用ajax时一些常见错误总结整理
Feb 27 PHP
详解php几行代码实现CSV格式文件输出
Jul 01 PHP
关于laravel5.5的定时任务详解(demo)
Oct 23 PHP
PHP http请求超时问题解决方案
Nov 13 PHP
兼容性最强的PHP生成缩略图的函数代码(修改版)
Jan 18 #PHP
discuz的php防止sql注入函数
Jan 17 #PHP
PHP统计目录下的文件总数及代码行数(去除注释及空行)
Jan 17 #PHP
php短域名转换为实际域名函数
Jan 17 #PHP
PHP学习笔记之三 数据库基本操作
Jan 17 #PHP
PHP学习笔记之二
Jan 17 #PHP
PHP学习笔记之一
Jan 17 #PHP
You might like
PHP小教程之实现链表
2014/06/09 PHP
thinkPHP实现表单自动验证
2014/12/24 PHP
php微信公众号开发(2)百度BAE搭建和数据库使用
2016/12/15 PHP
PHP读取CSV大文件导入数据库的实例
2017/07/24 PHP
JQuery 拾色器插件发布-jquery.icolor.js
2010/10/20 Javascript
js中访问html中iframe的文档对象的代码[IE6,IE7,IE8,FF]
2011/01/08 Javascript
jquery 层次选择器siblings与nextAll的区别介绍
2013/08/02 Javascript
jQuery实现移动 和 渐变特效的点击事件
2015/02/26 Javascript
深入理解JavaScript系列(45):代码复用模式(避免篇)详解
2015/03/04 Javascript
JS模仿编辑器实时改变文本框宽度和高度大小的方法
2015/08/17 Javascript
理解javascript闭包
2015/12/15 Javascript
jQuery实现元素拖拽并cookie保存顺序的方法
2016/02/20 Javascript
js实现页面跳转的几种方法小结
2016/05/16 Javascript
js实现四舍五入完全保留两位小数的方法
2016/08/02 Javascript
JS实现的随机排序功能算法示例
2017/06/09 Javascript
基于pako.js实现gzip的压缩和解压功能示例
2017/06/13 Javascript
BootStrap点击保存后实现模态框自动关闭的思路(模态框)
2017/09/26 Javascript
JS基于设计模式中的单例模式(Singleton)实现封装对数据增删改查功能
2018/02/06 Javascript
详解Vue中watch的高级用法
2018/05/02 Javascript
jquery ajax加载数据前台渲染方式 不用for遍历的方法
2018/08/09 jQuery
JS函数基本定义与用法示例
2020/01/15 Javascript
vue 数据遍历筛选 过滤 排序的应用操作
2020/11/17 Javascript
python模块之StringIO使用示例
2015/04/08 Python
Unicode和Python的中文处理
2017/03/19 Python
python使用for...else跳出双层嵌套循环的方法实例
2020/05/17 Python
Matlab中plot基本用法的具体使用
2020/07/17 Python
日本化妆品植村秀俄罗斯官方网站:Shu Uemura俄罗斯
2020/02/01 全球购物
上班玩手机检讨书
2014/02/17 职场文书
四群教育工作实施方案
2014/03/26 职场文书
委托书范文
2014/04/02 职场文书
学校党的群众路线教育实践活动总结报告
2014/07/03 职场文书
2015年初中教师个人工作总结
2015/07/21 职场文书
机关单位2016年创先争优活动总结
2016/04/05 职场文书
Ajax常用封装库——Axios的使用
2021/05/08 Javascript
MongoDB数据库常用的10条操作命令
2021/06/18 MongoDB
vue3不同环境下实现配置代理
2022/05/25 Vue.js