分类目录归档:memcache

Windows下安装配置PHP Memcached,附带Memcached_php5.2X/5.3下载

安装前准备:
1、memcached 1.2.1 for Win32 binaries,这个是 Win32 服务器端的 memcached 最新版本,下载见附件
2、php_memcache-5.2-Win32-vc6-x86-20090408.zip
这个是 php 所需的 PECL 扩展,即 php_memcache 扩展;(一定要和自己的 PHP 版本相同,我用的是5.3.3)
安装步骤:

1. 将第一个包解压放某个盘下面,比如在c:\memcached
2. 在终端下输入 c:\memcached\memcached.exe -d install , memcached将作为windows的一个服务
3. 再输入 c:\memcached\memcached.exe -d start , 这样服务器端已经安装完毕了
4. 解压第二个包包,里面会只有一个 php_memcache.dll 文件,把它放入 php5/ext/ 中
5. 在C:\WINDOWS\php.ini 加入一行 extension=php_memcache.dll
6.接着在 php.ini 文件里加上以下带代码,最好就放在刚才写 "extension=php_memcache.dll" 的下面:

[cce]
	[Memcache]
	memcache.allow_failover = 1
	memcache.max_failover_attempts=20
	memcache.chunk_size =8192
	memcache.default_port = 11211
[/cce]

7.重新启动Apache或者IIS,然后查看一下phpinfo,如果有 memcache 的说明,那么就说明安装成功啦!

试运行:

写一个 example.php 文件:(更多使用方法可以参看 PHP 手册里的 Memcache Functions 使用说明)
复制代码 代码如下:

 

[cce_php]
<?php
	//连接
	$mo = new Memcache;
	$mo->connect('localhost', 11211) or die ("Could not connect");//连接服务器
	//保存数据
	$mo->set('key1', 'This is first value', 0, 60);
	$val = $mo->get('key1');
	echo "Get key1 value:".$val;

	//替换数据
	$mo->replace('key1', 'This is replace value', 0, 60);
	$val = $mo->get('key1');
	echo "Get key1 value:".$val;
	echo "<br />";

	//保存数组
	$arr = array('aaa', 'bbb', 'ccc', 'ddd');
	$mo->set('key2', $arr, 0, 60);
	$val2 = $mo->get('key2');
	echo "Get key2 value: ";
	print_r($val2);
	echo "Get key1 value:".$val;
	echo "<br />";

	//删除数据
	$mo->delete('key1');
	$val = $mo->get('key1');
	echo "Get key1 value:".$val;
	echo "<br />";

	//清除所有数据
	$mo->flush();
	$val2 = $mo->get('key2');
	echo "Get key2 value: ".$val2;
	print_r($val2);
	echo "<br />";

	//关闭连接
	$mo->close();

?>
[/cce_php]

还可以查看“php使用Memcache简单入门教程”

 

本文内容收集和实践测试而成立

文件包里面包含了:memcached-1.2.1-win32.zip ,php_memcache5.3.3-V6-win32.zip,php_memcache-5.2-Win32-vc6-x86-20090408.zip

php使用Memcache简单入门教程

以下格式,说明点什么?

自己单一使用一边,每个一条就能体验出什么是Memcache,同时想说的是只有每条体验一条才会明白其中的道理,特别是如何把Memcache做成一个单列形式去操作,我觉得单列或是单列静态化的处理Memcache连接Select是最好的形式,看完以后,请查看相关的手册逐步测试
<?php
//连接
$mo = new Memcache;
$mo->connect('localhost', 11211) or die ("Could not connect");//连接服务器

//保存数据
$mo->set('key1', 'This is first value', 0, 60);
$val = $mo->get('key1');
echo "Get key1 value: " . $val ."<br />";

//替换数据
$mo->replace('key1', 'This is replace value', 0, 60);
$val = $mo->get('key1');
echo "Get key1 value: " . $val . "<br />";

//保存数组
$arr = array('aaa', 'bbb', 'ccc', 'ddd');
$mo->set('key2', $arr, 0, 60);
$val2 = $mo->get('key2');
echo "Get key2 value: ";
print_r($val2);
echo "<br />";

//删除数据
$mo->delete('key1');
$val = $mo->get('key1');
echo "Get key1 value: " . $val . "<br />";

//清除所有数据
$mo->flush();
$val2 = $mo->get('key2');
echo "Get key2 value: ";
print_r($val2);
echo "<br />";

//关闭连接
$mo->close();
?>

程序代码分析

初始化一个Memcache的对象:
$mo = new Memcache;

连接到我们的Memcache服务器端,第一个参数是服务器的IP地址,也可以是主机名,第二个参数是Memcache的开放的端口:
$mo->connect('localhost', 11211) or die ("Could not connect");//连接服务器

保存一个数据到Memcache服务器上,第一个参数是数据的key,用来定位一个数据,第二个参数是需要保存的数据内容,这里是一个字符串,第三个参数是一个标记,一般设置为0或者MEMCACHE_COMPRESSED就行了,第四个参数是数据的有效期,就是说数据在这个时间内是有效的,如果过去这个时间,那么会被Memcache服务器端清除掉这个数据,单位是秒,如果设置为0,则是永远有效,我们这里设置了60,就是一分钟有效时间:
$mo->set(‘key1‘, ‘This is first value’, 0, 60);

从Memcache服务器端获取一条数据,它只有一个参数,就是需要获取数据的key,我们这里是上一步设置的key1,现在获取这个数据后输出输出:
$val = $mo->get(’key1′);
echo "Get key1 value: " . $val;

现在是使用replace方法来替换掉上面key1的值,replace方法的参数跟set是一样的,不过第一个参数key1是必须是要替换数据内容的key,最后输出了:
$mo->replace(‘key1′, ‘This is replace value’, 0, 60);
$val = $mo->get(‘key1′);
echo "Get key1 value: " . $val;

同样的,Memcache也是可以保存数组的,下面是在Memcache上面保存了一个数组,然后获取回来并输出
$arr = array(‘aaa’, ‘bbb’, ‘ccc’, ‘ddd’);
$mo->set(‘key2′, $arr, 0, 60);
$val2 = $mo->get(‘key2′);
print_r($val2);

现在删除一个数据,使用delte接口,参数就是一个key,然后就能够把Memcache服务器这个key的数据删除,最后输出的时候没有结果
$mo->delete(‘key1′);
$val = $mo->get(‘key1′);
echo "Get key1 value: " . $val . "<br>";

最后我们把所有的保存在Memcache服务器上的数据都清除,会发现数据都没有了,最后输出key2的数据为空,最后关闭连接
$mo->flush();
$val2 = $mo->get(‘key2′);
echo "Get key2 value: ";
print_r($val2);
echo "<br>";

Memcache的使用
使用Memcache的网站一般流量都是比较大的,为了缓解数据库的压力,让Memcache作为一个缓存区域,把部分信息保存在内存中,在前端能够迅速的进行存取。那么一般的焦点就是集中在如何分担数据库压力和进行分布式,毕竟单台Memcache的内存容量的有限的。我这里简单提出我的个人看法,未经实践,权当参考。

分布式应用
Memcache本来支持分布式,我们客户端稍加改造,更好的支持。我们的key可以适当进行有规律的封装,比如以user为主的网站来说,每个用户都有User ID,那么可以按照固定的ID来进行提取和存取,比如1开头的用户保存在第一台Memcache服务器上,以2开头的用户的数据保存在第二胎Mecache服务器上,存取数据都先按照User ID来进行相应的转换和存取。

但是这个有缺点,就是需要对User ID进行判断,如果业务不一致,或者其他类型的应用,可能不是那么合适,那么可以根据自己的实际业务来进行考虑,或者去想更合适的方法。

减少数据库压力
这个算是比较重要的,所有的数据基本上都是保存在数据库当中的,每次频繁的存取数据库,导致数据库性能极具下降,无法同时服务更多的用户,比如MySQL,特别频繁的锁表,那么让Memcache来分担数据库的压力吧。我们需要一种改动比较小,并且能够不会大规模改变前端的方式来进行改变目前的架构。

我考虑的一种简单方法:
后端的数据库操作模块,把所有的Select操作提取出来(update/delete/insert不管),然后把对应的SQL进行相应的hash算法计算得出一个hash数据key(比如MD5或者SHA),然后把这个key去Memcache中查找数据,如果这个数据不存在,说明还没写入到缓存中,那么从数据库把数据提取出来,一个是数组类格式,然后把数据在set到Memcache中,key就是这个SQL的hash值,然后相应的设置一个失效时间,比如一个小时,那么一个小时中的数据都是从缓存中提取的,有效减少数据库的压力。缺点是数据不实时,当数据做了修改以后,无法实时到前端显示,并且还有可能对内存占用比较大,毕竟每次select出来的数据数量可能比较巨大,这个是需要考虑的因素。

Memcache的安全
我们上面的Memcache服务器端都是直接通过客户端连接后直接操作,没有任何的验证过程,这样如果服务器是直接暴露在互联网上的话是比较危险,轻则数据泄露被其他无关人员查看,重则服务器被入侵,因为Mecache是以root权限运行的,况且里面可能存在一些我们未知的bug或者是缓冲区溢出的情况,这些都是我们未知的,所以危险性是可以预见的。为了安全起见,我做两点建议,能够稍微的防止黑客的入侵或者数据的泄露。

内网访问
最好把两台服务器之间的访问是内网形态的,一般是Web服务器跟Memcache服务器之间。普遍的服务器都是有两块网卡,一块指向互联网,一块指向内网,那么就让Web服务器通过内网的网卡来访问Memcache服务器,我们Memcache的服务器上启动的时候就监听内网的IP地址和端口,内网间的访问能够有效阻止其他非法的访问。
# memcached -d -m 1024 -u root -l 192.168.0.200 -p 11211 -c 1024 -P /tmp/memcached.pid
Memcache服务器端设置监听通过内网的192.168.0.200的ip的11211端口,占用1024MB内存,并且允许最大1024个并发连接

设置防火墙
防火墙是简单有效的方式,如果却是两台服务器都是挂在网的,并且需要通过外网IP来访问Memcache的话,那么可以考虑使用防火墙或者代理程序来过滤非法访问。
一般我们在Linux下可以使用iptables或者FreeBSD下的ipfw来指定一些规则防止一些非法的访问,比如我们可以设置只允许我们的Web服务器来访问我们Memcache服务器,同时阻止其他的访问。
# iptables -F
# iptables -P INPUT DROP
# iptables -A INPUT -p tcp -s 192.168.0.2 –dport 11211 -j ACCEPT
# iptables -A INPUT -p udp -s 192.168.0.2 –dport 11211 -j ACCEPT
上面的iptables规则就是只允许192.168.0.2这台Web服务器对Memcache服务器的访问,能够有效的阻止一些非法访问,相应的也可以增加一些其他的规则来加强安全性,这个可以根据自己的需要来做。

memcache的安装及配置php扩展

windows下使用memcache

1、首先下载memcache的windows版本,将下载下来的文件解压出来后会看见一个名为memcached.exe的可执行程序

2、将该文件放到指定目录,如D盘

3、安装:

开始->运行->cmd打开命令窗口

进入D盘:cd d:

安装memcache服务:

在命令窗口输入:

 

memacahed.exe -d install

 

 

等待命令执行完成后,就可以在服务列表中看到memcached服务

4、启动memcache服务:

 

memcached.exe -d start

 

5、可以通过以下命令来查看memcache服务是否启动成功:

 

wmic process get description, executablepath | findstr memcached.exe

 

可以将memcached.exe的路径放入到系统环境变量中,方便使用。

查看memcache运行状态:

在命令窗口输入:

 

telnet 127.0.0.1 11211

 

链接到memcache上,输入stats就可以查看到当前memcache的状态了

pid memcache服务器的进程ID
uptime 服务器已经运行的秒数
time 服务器当前的unix时间戳
version memcache版本
pointer_size 当前操作系统的指针大小(32位系统一般是32bit)
rusage_user 进程的累计用户时间
rusage_system 进程的累计系统时间
curr_items 服务器当前存储的items数量
total_items 从服务器启动以后存储的items总数量
bytes 当前服务器存储items占用的字节数
curr_connections 当前打开着的连接数
total_connections 从服务器启动以后曾经打开过的连接数
connection_structures 服务器分配的连接构造数
cmd_get get命令(获取)总请求次数
cmd_set set命令(保存)总请求次数
get_hits 总命中次数
get_misses 总未命中次数
evictions 为获取空闲内存而删除的items数(分配给memcache的空间用满后需要删除旧的items来得到空间分配给新的items)
bytes_read 总读取字节数(请求字节数)
bytes_written 总发送字节数(结果字节数)
limit_maxbytes 分配给memcache的内存大小(字节)
threads 当前线程数

 
linxu下配置memcache

下载memcache源码

http://www.memcached.org/

解压并进入目录

 

./configure --prefix=/usr/local/memcache
make
make test
sudo make install

复制代码

启动memcache

 

memcache -d start -u root

 

验证memcache是否正确安装并启动

 

netstat -tap | grep memcached

 

 

安装memcache扩展库

下载memcache扩展

进入到memcache扩展文件

 

./configure --enable-memcache --with-php-config=/usr/local/php/bin/php-config
make
make install

复制代码

修改php.ini文件 增加

 

extension=memcache.so

 

 

安装memcached扩展库

下载memcached扩展

memcached扩展需要libMemcached库的支持,所有在安装memcached扩展库之前要确认系统已经安装了libmemcached

安装libmemcached

 

./configure --prefix=/usr/local/memcache
make
make install

复制代码

libmemcached安装完成后,就可以安装memcached扩展库

 

./configure --with-libmemcached-dir=/usr/local/memcached/ --with-php-config=/usr/local/php/bin/php-config
make
make install

复制代码

同样修改php.ini配置文件,增加

 

extension=memcached.so

 

 

memcached的基本设置:

-p 监听的端口

-l 连接的IP地址, 默认是本机

-d start 启动memcached服务

-d restart 重起memcached服务

-d stop|shutdown 关闭正在运行的memcached服务

-d install 安装memcached服务

-d uninstall 卸载memcached服务

-u 以的身份运行 (仅在以root运行的时候有效)

-m 最大内存使用,单位MB。默认64MB

-M 内存耗尽时返回错误,而不是删除项

-c 最大同时连接数,默认是1024

-f 块大小增长因子,默认是1.25

-n 最小分配空间,key+value+flags默认是48

-h 显示帮助<-->

memcache图形管理工具

下载图形管理工具:http://livebookmark.net/memcachephp/memcachephp.zip

修改  $MEMCACHE_SERVERS[] = 'localhost:11211' 为自己服务器的地址。

如何为大型网站提速页面静态化缓存技术memcache-mysql优化

如何为大型网站提速( 静态化、 缓存技术memcache、 mysql优化)

提出问题->引出新技术->小案例(快速入门)->细节—(长期)---->使用项目
重要的概念

① 静态网址

② 动态网址

③ 伪静态网址

传统的做法->动态网址

2.(减少sql注入攻击风险)

补充说明

Seo (search engine optimization 搜索引擎优化)
页面静态化的分类

为什么要静态化

1. 访问php的速度比html慢

在apache / bin /ab.exe 可以做压力测试,该工具可以模拟多人,并发访问某个页面.

基本的用法

//–n 10000 请求多少次

//–c 10

ab.exe –n 10000 –c 10

-n 表示 请求多少次

-c 表示 多少人

2. 静态化利于seo

3. 防止sql注入

① 真静态

方法1: 使用php自身的缓存机制

output_buffering 缓存

程序缓存

如果要测试php自己的缓存机制, 需要做配置.

php.ini 文件

display_errors=On

output_buffering=Off

error_reproting= 设置错误级别

看一段代码

 

开启缓存: 1. Ob_start();

2. Php.ini

Ob_get_contents() 获取 output_buffering 的内容

Ob_clean();清空 output_buffering 的内容

Ob_end_clean() 关闭缓存 并删除ob 内容

Ob_end_flush() 输出缓存ob内容并关闭缓存

Ob_flush() 输出缓存ob内容并清空

Flush() 刷新程序缓存的内容

Str_repeat("",100); //显示100个空白

这里我们看一个综合案例,需求如下:

传统解决方法:

页面静态化思路:

因为新闻这种信息不是对实时性要求高,并且比较稳定,所以我们可以这样做,当第一个用户访问某条新闻后,我们使用ob的缓存机制,把内容缓存到html页面,当下一次访问时,直接访问html即可.

问题?

1. 如果我们的新闻更新了,这样我们的静态页面不变->解决

解决方法1,我们可以判断静态页面是否过期(30s) ,如果过期,则重新创建

代码:-->

if(file_exists($html_filename)&& filemtime($html_filename)+30>time()){

//直接访问html页面(把html页面的内容 echo 浏览器)

echo file_get_contents($html_filename);

exit;

}

难道这样就完美了吗?

1. news_list.php页面中点击 查看时候,仍然是一个php页面-> html网址

2. 实时性不够好,30s的延时..

解决思想:

当我们添加新闻或者更新新闻的时候,就同步的更新html静态页面,通常的做法,设计模板文件(网页设计师/美工),通过模板创建静态页面.

整理思路

提出为什么需要静态化.

静态化的方式( 使用ob 缓存来实现静态化 问题1 实时性不好,有延时, 2, 请求某个查询页面时使用 php动态网站)
真静态 (在 添加和修改的时候,可以实时的处理静态页面 问题 如果数据时海量的,造成真静态的html 文件过多,占用磁盘很大.)伪静态技术

② 伪静态

我们可以有两种方法来处理

1. 在php文件中,直接使用正则表达式技术处理

代码:

//echo "hello ok";

//echo "

";

//print_r($_SERVER);

//echo "

";

$parameters=$_SERVER['PATH_INFO'];

if(preg_match('/^\/(\d+),(\d+),(\d+)\.html/si',$parameters,$arr)){

echo $arr[1]."";

echo $arr[2]."
";

echo $arr[3]."
";

}else{

echo "输入的地址有误!";

}

?>

课后练习:

请使用正则表达式完成

在news.php页面中可以获取到

news sport 5

提出问题?

相当向 http://localhost/news.php?class=sport&id=56

2. 配置apache的rewrite来处理

快速入门案例

请求

原理图

如何使用rewrite步骤:

1. 配置apache,启用rewrite机制

在httpd.conf中启用rewrite

LoadModule rewrite_module modules/mod_rewrite.so

2. 配置虚拟主机

到 c盘 hosts文件添加你的 ip 和 域名对应

127.0.0.1

在 http.conf 文件中启用虚拟主机

# Virtual hosts 启用虚拟主机

Include conf/extra/httpd-vhosts.conf

3. 配置 httpd_vhosts.conf文件

在 <Direcotry >段的配置,默认值,是在httpd.conf 的中配置,看根目录.

 

#ServerAdmin webmaster@dummy-host2.somenet.com

#文档的根目录

DocumentRoot "C:/myenv/apache/htdocs/static3"

#域名

ServerName www.hsp.com

ErrorLog "logs/dummy-host2.somenet.com-error.log"

#CustomLog "logs/dummy-host2.somenet.com-access.log" common

#配置rewrite相关选项,

<Directory "C:/myenv/apache/htdocs/static3">

#拒绝所有的访问

#Deny from all

Allow from all

#是否显示列表(在发布项目后一般是不启用,对于这个配置,针对 DocumentRoot在htdos外的目录生效)

#Options +indexes

#是否启用rewrite

#Allowoverride all

 

 

4.在目录下添加了一个 .htaccess 文件,这个文件时配置rewrite机制和规则

 

#写你的rewrite规则

RewriteEngine On

#news-id(\d+)\.html$ 是规则 news.php?id=$1 是转发的页面

#正则 子表达式 捕获 反向引用

# "news-id33.html"

# 可以配置多个规则,匹配的顺序是从上到下

RewriteRule news-id(\d+)\.html$ news.php?id=$1

RewriteRule news-id(\d+)\.html$ error.php

 

综合使用案例

4. 这个rewrite的规则也直接在 < Direcotry > 段直接配置

<Directory "C:/myenv/apache/htdocs/static3">

#拒绝所有的访问

#Deny from all

Allow from all

#是否显示列表(在发布项目后一般是不启用,对于这个配置,针对 DocumentRoot在htdos外的目录生效)

#Options +indexes

#是否启用rewrite

Allowoverride all

#我们有时候,也可以把rewrite机制和规则写这里

#RewriteEngine On

#RewriteRule news-id(\d+)\.html$ news.php?id=$1

 

使用伪静态来完成简单的新闻查询.

☞ 伪静态是站在seo角度看.,他对于的页面不是存在的,而是每次查询数据库得到的信息,

真静态的页面是真的存在.

如果只是为了seo, 完全不希望有html ,那就只使用 伪静态.

如果的网址要seo ,项目 数据大(1000 w) 你就希望伪静态同时ob 来缓存.

如何更好的使用 伪静态+ob

在windows 下

① 编写一个 clear.php 文件,可以去检测某个目录下的文件是否过期

② 在编写my.bat文件

"C:\\myenv\\apache\\bin\\ab.exe" -n 1 -c 1

③ 在windows使用任务计划.

④ ok

在linux

使用crontab 参看 linux视频.

面试题: 请说明一下伪静态和真静态的特点和区别

①真静态访问效率高,利于seo.可以减少对数据库的操作。但是会占用大量

的磁盘.

②伪静态一、可以方便的实现对搜索引擎的优化,二、占空间比较小。三、通过生成不同view-id2.hmtl 可以实现内容的变化.四有效的防止了注入攻击

小结: 如果一个网页会被频繁的访问(比如百万级别),通过该网页每次都会去操作数据库,可以考虑使用真静态(建议有针对性的使用),如果一个网页为了实现对搜索引擎的优化,提供网站的安全性,使用伪静态.

补充知识 php中如何 使用正则表达式?

<?php

//案例

$str="akfdka1234 kafdla 9000";

//需求: 把 四个连续的数找到

//preg_match 函数只匹配第一个目标,$arr[0] 就存放匹配到得结果,

//$arr[1] 会匹配 模式中第一个子表达式的结果

//$arr[n] 会匹配 模式中第n个子表达式的结果

preg_match("/(\d\d)(\d\d)/si",$str,$arr);

echo "

";

print_r($arr);

echo "

";

//preg_match_all 函数匹配所有目标,$arr[0] 就存放匹配到得所有结果,

//$arr[0][1] 存放第一个匹配的结果

//$arr[0][n] 存放第n个匹配的结果

//$arr[1][0] 放入第一个匹配到得结果中的第一个子表达式的结果

//$arr[1][n] 放入第n+1个匹配到得结果中的第一个子表达式的结果

preg_match_all('/(\d\d)(\d\d)/si',$str,$arr);

echo "

";

print_r($arr);

echo "

";

$str="111-999-444 ka345-900-890 jdl90akjdfals";

preg_match('/(\d)\1{2}-(\d)\2{2}-(\d)\3{2}/si',$str,$arr);

echo "

";

print_r($arr);

echo "

";