新聞中心
如何全量同步mysql數(shù)據(jù)
增量同步和全量同步是數(shù)據(jù)庫同步的兩種方式。全量同步是一次性同步全部數(shù)據(jù),增量同步則只同步兩個數(shù)據(jù)庫不同的部分。
為西安等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計制作服務(wù),及西安網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為成都網(wǎng)站制作、做網(wǎng)站、西安網(wǎng)站設(shè)計,以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務(wù),秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求,就會得到認(rèn)可,從而選擇與我們長期合作。這樣,我們也可以走得更遠(yuǎn)!
怎么實現(xiàn)兩臺服務(wù)器的mysql數(shù)據(jù)同步
這種架構(gòu)一般用在以下三類場景
1. 備份多臺 Server 的數(shù)據(jù)到一臺如果按照數(shù)據(jù)切分方向來講,那就是垂直切分。比如圖 2,業(yè)務(wù) A、B、C、D 是之前拆分好的業(yè)務(wù),現(xiàn)在需要把這些拆分好的業(yè)務(wù)匯總起來備份,那這種需求也很適用于多源復(fù)制架構(gòu)。實現(xiàn)方法我大概描述下:業(yè)務(wù) A、B、C、D 分別位于 4 臺 Server,每臺 Server 分別有一個數(shù)據(jù)庫來隔離前端的業(yè)務(wù)數(shù)據(jù),那這樣,在從庫就能把四臺業(yè)務(wù)的數(shù)據(jù)全部匯總起來,而不需要做額外的操作。那沒有多源復(fù)制之前,要實現(xiàn)這類需求,只能在匯總機(jī)器上搭建多個 MySQL 實例,那這樣勢必會涉及到跨庫關(guān)聯(lián)的問題,不但性能急劇下降,管理多個實例也沒有單臺來的容易。
2. 用來聚合前端多個 Server 的分片數(shù)據(jù)。
同樣,按照數(shù)據(jù)切分方向來講,屬于水平切分。比如圖 3,按照年份拆分好的數(shù)據(jù),要做一個匯總數(shù)據(jù)展現(xiàn),那這種架構(gòu)也非常合適。實現(xiàn)方法稍微復(fù)雜些:比如所有 Server 共享同一數(shù)據(jù)庫和表,一般為了開發(fā)極端透明,前端配置有分庫分表的中間件,比如愛可生的 DBLE。
3. 匯總并合并多個 Server 的數(shù)據(jù)
第三類和第一種場景類似。不一樣的是不僅僅是數(shù)據(jù)需要匯總到目標(biāo)端,還得合并這些數(shù)據(jù),這就比第一種來的相對復(fù)雜些。比如圖 4,那這樣的需求,是不是也適合多源復(fù)制呢?答案是 YES。那具體怎么做呢?
怎么使Mysql數(shù)據(jù)同步
先假設(shè)有主機(jī) A 和 B ( Linux 系統(tǒng)),主機(jī) A 的 IP 分別是 1.2.3.4 (當(dāng)然,也可以是動態(tài)的),主機(jī) B 的 IP 是 5.6.7.8 。兩個主機(jī)都裝上了 PHP+Mysql ,現(xiàn)在操作的是主機(jī) A 上的資料,如果另外一個主機(jī) B 想跟 A 的資料進(jìn)行同步,應(yīng)該怎么做呢?
OK,我們現(xiàn)在就動手。
首先,如果要想兩個主機(jī)間的資料同步,一種方法就是主機(jī) A 往主機(jī) B 送資料,另外一種主法就是主機(jī) B 到主機(jī) A 上拿資料,因為 A 的 IP 是動態(tài)的(假設(shè)),所以我們就得從主機(jī) A 往主機(jī) B 送資料。
在主機(jī) B 上創(chuàng)建一個 Mysql 賬戶。
# GRANT ALL ON test.* TO user@% IDENTIFIED BY "password"; //創(chuàng)建用戶 user,可以從任何機(jī)器訪問到主機(jī) B 上的 test 數(shù)據(jù)庫。
如果這里顯示錯誤,先把 % 改為一個 IP ,然后再利用 phpMyAdmin 把 IP 改為 % ,測試無誤后就可以寫 php 程序。
?
$link=mysql_pconnect("localhost","user","password");
mysql_pconnect("localhost","user","password"); //連接本機(jī)(主機(jī)A)的數(shù)據(jù)庫
mysql_select_db("test"); //選擇數(shù)據(jù)庫test
$re=mysql_query("select * from table order by id desc");
$num=mysql_numrows($re);
if (!empty($num)) {
$id=mysql_result($re,0,"id"); //獲得本機(jī)table表的最大ID
}
mysql_close($link); //關(guān)閉與本機(jī)數(shù)據(jù)庫的連接
$link=mysql_pconnect("5.6.7.8","test","test");
mysql_pconnect("5.6.7.8","test","test"); //連接主機(jī)B的數(shù)據(jù)庫
mysql_select_db("test"); //選擇數(shù)據(jù)庫test,此數(shù)據(jù)庫應(yīng)該與主機(jī)A上test數(shù)據(jù)庫的結(jié)構(gòu)一樣。
$re=mysql_query("select * from table order by id desc");
$num=mysql_numrows($re);
if (!empty($num)) {
$remote_id=mysql_result($re,0,"id"); //獲得主機(jī)Btable表的最大ID
}
if ($id$remote_id) {
$result_id=$id-$remote_id; //如果主機(jī)A中table的最大ID大于主機(jī)B中table表的最大ID,說明兩個
} 的資料不同
mysql_close($link); //關(guān)閉主機(jī)B的數(shù)據(jù)庫連接
$link=mysql_pconnect("localhost","user","password");
mysql_pconnect("localhost","user","password");
mysql_select_db("test");
if (empty($result_id)) $result_id=0;
if (empty($remote_id)) $remote_id=0; //如果主機(jī)B中的table的最大ID為空(里面沒有資料),那么就等0
$re=mysql_query("select * from table limit $remote_id,$result_id"); //取出主機(jī)A中table表與主機(jī)B中table表里不同的資料
$num=mysql_numrows($re);
if (!empty($num)) {
for ($i=0;$i$num;$i++) {
$test[$i]=mysql_result($re,$i,"test"); //把不同的資料放入一個數(shù)組里
}
}
mysql_close($link); //關(guān)閉主機(jī)A的數(shù)據(jù)庫連接
$link=mysql_pconnect("5.6.7.8","user","password");
mysql_pconnect("5.6.7.8","user","pasword");
mysql_select_db("test");
for ($j=0;$j$i;$j++) { //這里的i等于在比較主機(jī)A與主機(jī)B上table表不同資料的數(shù)量
mysql_query("insert into table (test) values(\'$test[$j]\')");
}
mysql_close($link); //關(guān)閉主機(jī)B的數(shù)據(jù)庫連接
?
這時就初步實現(xiàn)了 A 主機(jī)和 B 主機(jī)數(shù)據(jù)的同步,但現(xiàn)在還需要人手動每次去激活這個程序,有沒有辦法把它作為一個腳本一樣的,放在 crontab 里面指定時間自動執(zhí)行呢?
在安裝 php 時會自動生一個叫 php 的可執(zhí)行文件,一般在/你安裝的 php 目錄 /bin 下面,不過較底的版本好像沒有,如果沒有這個文件,你就得升級你的 php 。
#php -q test.php
php 原本是應(yīng)用在網(wǎng)頁應(yīng)用的﹐因此它會送出 HTML 的 Header﹐但是在此我們是要將 php 用作 Shell Script﹐"-q" 就是表示不要送出 Header 的意思.
最后編輯 /etc/crontab 里的文件,加上下面這一句。
0 0 * * * root /home/httpd/html/test //每天晚上零點執(zhí)/home/httpd/html/test文件(具體使用方法請查看cron的相關(guān)資料)
OK,到這里差不多就已完成 Mysql 數(shù)據(jù)的同步了,如果各位還有興趣的話,可以想一個連編輯、刪除都能同步的更好的辦法。
網(wǎng)站欄目:包含mysql數(shù)據(jù)多怎么同步的詞條
文章出自:http://www.dlmjj.cn/article/docsgoe.html