前言
:
在PHP+MySQL架構(gòu)的站點中,本文重點從MySQL的角度去分析如何使Discuz!論壇(或者類似的PHP+MySQL架構(gòu)的程序)應(yīng)對大訪問量。同時給出一些使用Memcache去減輕MySQL壓力的建議。其中很多數(shù)據(jù)是個人測試的結(jié)果,如有不同意見,敬請留言告之。另外由于個人思維的問題,行文比較跳躍,特此聲明!
系統(tǒng)分析
:
單純的從MySQL的角度出發(fā),單臺MySQL的數(shù)據(jù)庫負(fù)載到每天上億次的操作(每秒大概1100次MySQL操作,然后乘以86400)應(yīng)該不是非常困難的事情。按照這個數(shù)據(jù)也就是說一個單MySQL服務(wù)器的論壇來說可以跑到2千萬PV是不成問題的,我相信國內(nèi)絕大部分的論壇都不可能做到每天2千萬的PV,但實際情況并不是如此。當(dāng)論壇PV超過百萬的時候一臺WEB早已經(jīng)不堪重負(fù)了。
就我手頭的一些數(shù)據(jù)顯示,目前的Discuz!論壇的基本服務(wù)器架構(gòu)是前面Squid頂著,后面才是一臺DB在撐著。這種架構(gòu)中,web服務(wù)器壓力增大可以通過并行增加服務(wù)器解決,而MySQL壓力卻無處釋放,在不考慮MySQL官方服務(wù)的情況下,我們通過合理的利用Memcache是可以達(dá)到減輕MySQL服務(wù)器負(fù)載的。
可能會有朋友說我們可以對數(shù)據(jù)表進(jìn)行分表( 注:此處分表是指通過PHP程序去分表,比如pw,dv的分表 )處理,但是當(dāng)前的情況是一臺DB服務(wù)器已經(jīng)不能支撐當(dāng)前的數(shù)據(jù)處理了,通過PHP對MySQL進(jìn)行的分表依然不能減輕MySQL的負(fù)載。( 注:本段文字針對已經(jīng)成型的系統(tǒng),如果是獨立開發(fā)的系統(tǒng)在架構(gòu)前期就進(jìn)行數(shù)據(jù)的同步分區(qū)還是不錯的。 )
還可能有朋友會說利用MySQL的主從構(gòu)架,如果你提出這個問題,我就很明確的告訴你,回去看看手冊吧。在Mysql Master/Slave 模式中,Slave主要是來備份數(shù)據(jù)的,只有當(dāng)Master出現(xiàn)故障時,Slave才會接過Master的服務(wù),對外部請求進(jìn)行處理,直到Master恢復(fù)正常。就是說: 在Master/Slave中,要么是Master在服務(wù),要么是Slave在服務(wù),不會Master/Slave同時提供服務(wù)。 使用MySQL主從依然不能有效的降低MySQL的負(fù)載。
或許你又會問我為什么不使用MySQL集群(MySQL Cluster),那可是白花花的銀子啊,同等金錢的付出下,獲得最大的收益才是王道。PS:說句題外話,MySQL手冊中將MySQL集群解釋為MySQL簇,不習(xí)慣。
其實在MySQL5.1中的MySQL分區(qū)(MySQL Partition)是個很好的東西,它允許根據(jù)可以設(shè)置為任意大小的規(guī)則,跨文件系統(tǒng)分配單個表的多個部分。實際上,表的不同部分在不同的位置被存儲為單獨的表。我認(rèn)為這個才是當(dāng)前情況下,最積極有效的降低MySQL負(fù)載的 解決方法之一 。但是遺憾的是,這種MySQL分區(qū)的方式我個人沒有使用過的經(jīng)歷,也不見有相當(dāng)充分的案例表明它是穩(wěn)定的或者不穩(wěn)定的。所以我還在徘徊中。如果你知道,請麻煩告之!有朋友說騰訊是在用MySQL分區(qū),但是遺憾的是我沒有得到確切的數(shù)據(jù)。
好了分析總結(jié)了這么多種降低MySQL負(fù)載的方式之后,在用戶環(huán)境需求等特定條件下,我得出結(jié)論在當(dāng)前情況下,緩解Discuz!論壇的MySQL負(fù)載比較有效的方法就是使用Memcache!
?
使用Memcache的理由
:
1.Web Server(Lighttpd、Nginx據(jù)說都比Apache效率高好多,大家可以試用下)對CPU要求高,對內(nèi)存要求低;而Memcached Server是對CPU要求低,對內(nèi)存要求高,所以可以搭配使用。在對前端的Web Server上安裝Memcached Server是可行的。
2.金錢金錢金錢,最少的付出,獲得最大的收益。
3.簡單簡單簡單,對于一個架構(gòu)合理的系統(tǒng)來說,添加Memcache的支持可能只是一個批量處理文件的過程
Discuz!使用Memcache
1.在config.inc.php中增加
$memcacheport = 11211;
$memcachelife = 60;
2.在include/common.inc.php中
$mem->connect($memcachehost, $memcacheport);
3.修改include/db_mysql.class.php中的fetch_array、query這兩個方法,并添加query_mysql方法,代碼如下:
return is_resource($query) ? mysql_fetch_array($query, $result_type) : $query[0];
}
function query_memcache($sql, $type = '') {
global $mem,$memcachelife;
$key = md5($sql);
if(!($query = $mem->get($key))) {
$query = $this->query($sql, $type);
while($item? = $this->fetch_array($query)) {
$res[] = $item;
}
$query = $res;
$mem->set($key, $query , 0, $memcachelife);
}
return $query;
}
function query($sql, $type = '') {
global $debug, $discuz_starttime, $sqldebug, $sqlspenttimes;
$func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ?
'mysql_unbuffered_query' : 'mysql_query';
if(!($query = $func($sql, $this->link)) && $type != 'SILENT') {
$this->halt('MySQL Query Error', $sql);
}
if(substr($sql, 0, 6) == 'SELECT') {
echo '<font color="red">Cache SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
} else {
echo '<font color="red">Flash SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
}
$this->querynum++;
return $query;
}
4.將需要使用Memcache緩存的SQL查詢的代碼由
修改為
注意并將
修改為
沒有while的$db->fetch_array可以不用修改。
下面代碼有用得著的就拿去:
回頭放出個小工具批量替換下就可以了。
在EditPlus中可以這樣替換:while\([$](.*) = [$]db->fetch_array\([$]query\)\)替換為foreach($query as $\1)
5.完成了,測試吧!~
參考資料
:
對Memcached有疑問的朋友可以參考下列文章:
Linux下的Memcache安裝
:http://www.ccvita.com/257.html
Windows下的Memcache安裝
:http://www.ccvita.com/258.html
Memcache基礎(chǔ)教程
:http://www.ccvita.com/259.html
Discuz!的Memcache緩存實現(xiàn)
:http://www.ccvita.com/261.html
Memcache協(xié)議中文版
:http://www.ccvita.com/306.html
Memcache分布式部署方案
:http://www.ccvita.com/395.html
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯(lián)系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機(jī)微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
