新聞中心
在企業(yè)信息化建設(shè)中,數(shù)據(jù)庫是重要的軟件基礎(chǔ)設(shè)施之一。然而,隨著公司規(guī)模和業(yè)務(wù)的不斷擴(kuò)大,數(shù)據(jù)量和數(shù)據(jù)復(fù)雜度也隨之增加,這就使得數(shù)據(jù)庫在本地部署和維護(hù)過程中面臨一些難以避免的問題。比如,在分支機(jī)構(gòu)、災(zāi)備、異地備份等應(yīng)用場景中,實(shí)現(xiàn)高效數(shù)據(jù)交流是困擾企業(yè)的問題之一。而異地?cái)?shù)據(jù)庫同步技術(shù)正是為了解決這一問題而生的。

創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),海安企業(yè)網(wǎng)站建設(shè),海安品牌網(wǎng)站建設(shè),網(wǎng)站定制,海安網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營銷,網(wǎng)絡(luò)優(yōu)化,海安網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競爭力??沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿,時(shí)刻以成就客戶成長自我,堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。
一、 異地?cái)?shù)據(jù)庫同步技術(shù)
異地?cái)?shù)據(jù)庫同步技術(shù)是指在異地部署的兩個(gè)或多個(gè)數(shù)據(jù)庫之間實(shí)現(xiàn)數(shù)據(jù)的自動或手動同步,使得異地?cái)?shù)據(jù)庫間達(dá)到數(shù)據(jù)一致性,從而確保數(shù)據(jù)及時(shí)正確,并降低數(shù)據(jù)操作及維護(hù)成本,提高數(shù)據(jù)可靠性和加強(qiáng)數(shù)據(jù)安全性。
異地?cái)?shù)據(jù)庫同步技術(shù)的實(shí)現(xiàn)需要傳輸性能高效達(dá)到一定要求。而網(wǎng)絡(luò)傳輸和數(shù)據(jù)庫操作都會導(dǎo)致一定程度的性能損失,因此在使用異地?cái)?shù)據(jù)庫同步工具前,應(yīng)該仔細(xì)權(quán)衡自身業(yè)務(wù)的特點(diǎn)和要求,選擇合適的同步工具。
常見的異地?cái)?shù)據(jù)庫同步技術(shù)分為以下幾種:
1. 觸發(fā)器同步
觸發(fā)器同步是通過在數(shù)據(jù)庫中定義一個(gè)觸發(fā)器,一旦數(shù)據(jù)庫有數(shù)據(jù)的插入、刪除、更新操作,就會觸發(fā)相應(yīng)的操作,把數(shù)據(jù)同步到目標(biāo)數(shù)據(jù)庫中。觸發(fā)器同步的優(yōu)點(diǎn)是能夠即時(shí)同步,一旦有數(shù)據(jù)修改,同步就會立刻執(zhí)行。但缺點(diǎn)也很明顯——它對數(shù)據(jù)庫的性能造成一定的影響,尤其是對于大量的寫入操作,可能會導(dǎo)致大量的觸發(fā),從而拖慢同步速度。
2. 數(shù)據(jù)庫日志復(fù)制
數(shù)據(jù)庫日志復(fù)制是以數(shù)據(jù)庫的操作日志文件為基礎(chǔ),把日志文件傳輸?shù)侥繕?biāo)數(shù)據(jù)庫,再在目標(biāo)數(shù)據(jù)庫中應(yīng)用日志記錄,以達(dá)到同步數(shù)據(jù)的效果。這種方式的優(yōu)點(diǎn)是減輕了數(shù)據(jù)庫的壓力,特別是面對大量的寫入操作。但缺點(diǎn)也很明顯——必須保證兩個(gè)數(shù)據(jù)庫的版本是相同的。否則,日志錯(cuò)位或者格式不一致,可能會導(dǎo)致同步失敗。
3. 數(shù)據(jù)庫復(fù)制
數(shù)據(jù)庫復(fù)制可以理解為源數(shù)據(jù)庫的備份在目標(biāo)數(shù)據(jù)庫上的還原,并通過在源數(shù)據(jù)庫進(jìn)行增量備份和實(shí)時(shí)傳輸?shù)侥繕?biāo)數(shù)據(jù)庫實(shí)現(xiàn)同步。數(shù)據(jù)庫復(fù)制的優(yōu)點(diǎn)是完全不影響源數(shù)據(jù)庫的性能,但需要占用大量的磁盤空間和帶寬資源,因?yàn)樽钚聜浞輸?shù)據(jù)的傳輸一旦有了誤差,都需要重新進(jìn)行同步。
三種同步方式各有優(yōu)缺點(diǎn),需要根據(jù)實(shí)際情況選擇,也可以根據(jù)實(shí)際需要組合使用??傮w來說,數(shù)據(jù)庫日志復(fù)制和數(shù)據(jù)庫復(fù)制的方式比較適用于大型企業(yè),而觸發(fā)器同步更適用于小型企業(yè)或小數(shù)據(jù)量同步。
二、 異地?cái)?shù)據(jù)庫同步技術(shù)實(shí)踐
異地?cái)?shù)據(jù)庫同步技術(shù)實(shí)踐是指根據(jù)自身業(yè)務(wù)情況,選擇合適的異地?cái)?shù)據(jù)庫同步工具,對數(shù)據(jù)庫進(jìn)行配置和同步,最終實(shí)現(xiàn)數(shù)據(jù)共享。下面以MySQL數(shù)據(jù)庫為例,講述異地?cái)?shù)據(jù)庫同步技術(shù)的具體實(shí)踐過程。
1. 配置 master 主服務(wù)器
通過配置主服務(wù)器上MySQL的my.cnf文件,設(shè)置復(fù)制服務(wù)器的IP地址和二進(jìn)制日志文件。
#bind-address= 192.168.1.105 # 設(shè)置 master 主服務(wù)器的 IP 地址 server-id=1 # 設(shè)置對應(yīng)的 server-id binlog-do-db=db_name # 指定需要同步數(shù)據(jù)庫的庫名,如app_database binlog-ignore-table=db_name.tb_name # 指定不需要同步的表名,可通過SHOW TABLE STATUS FROM db_name;查詢 binlog-format = ROW # 指定日志格式是ROW格式 log-bin=/var/lib/mysql/mysql-bin # 設(shè)置日志文件路徑 binlog_cache_size=1M # 二進(jìn)制日志緩存大小 max_binlog_size=1G # 指定二進(jìn)制日志大小 sync_binlog=1 # 每寫一次事務(wù)就會主動flush到磁盤
2. 配置 slave 從服務(wù)器
通過配置從服務(wù)器上MySQL的my.cnf文件,設(shè)置主服務(wù)器的IP地址、端口號和master的二進(jìn)制日志文件。
#bind-address=192.168.1.106 # 設(shè)置slave從服務(wù)器的 IP 地址,用于同步數(shù)據(jù) server-id=2 # 設(shè)置對應(yīng)的 server-id(要比master主服務(wù)器的server-id要大) master-host=192.168.1.105 # 指定master主服務(wù)器的ip地址 master-port=3306 # 指定master主服務(wù)器的端口 replay-log=1 # 啟用從 binlog 中重現(xiàn)事務(wù)所有操作 relay-log-index=/var/lib/mysql/slave-relay-bin.index # 中繼日志索引文件路徑 relay-log=/var/lib/mysql/slave-relay-bin # 中繼日志文件路徑 log-slave-updates=1 # 記錄 slave 從服務(wù)器接收到的所有更改信息 sql-slave-skip-counter=1 # 當(dāng)slave服務(wù)器出現(xiàn)錯(cuò)誤時(shí),可通過該參數(shù)跳過記錄造成錯(cuò)誤的那個(gè)SQL語句
3. 測試同步
完成上述步驟后,根據(jù)業(yè)務(wù)實(shí)際情況,測試數(shù)據(jù)是否能夠正常同步。在測試同步的過程中,應(yīng)注意目標(biāo)數(shù)據(jù)庫的版本、數(shù)據(jù)的類型和大小,以及網(wǎng)絡(luò)延遲和帶寬情況等因素的影響。
三、 結(jié)語
異地?cái)?shù)據(jù)庫同步技術(shù)的實(shí)現(xiàn)對現(xiàn)代企業(yè)發(fā)展至關(guān)重要。通過構(gòu)建高效的數(shù)據(jù)交流平臺,可以更好地支持企業(yè)信息化建設(shè)和業(yè)務(wù)的快速響應(yīng)。不同的數(shù)據(jù)交流方式和不同的數(shù)據(jù)庫之間都有不同的實(shí)現(xiàn)方法,因此在選擇和應(yīng)用異地?cái)?shù)據(jù)庫同步技術(shù)時(shí),需要根據(jù)具體業(yè)務(wù)場景進(jìn)行選擇和應(yīng)用。
相關(guān)問題拓展閱讀:
- 數(shù)據(jù)庫與數(shù)據(jù)庫之間數(shù)據(jù)如何同步
- 本地sql數(shù)據(jù)庫怎么與遠(yuǎn)程sql數(shù)據(jù)庫同步?
- 有個(gè)數(shù)據(jù)庫,怎么實(shí)現(xiàn)數(shù)據(jù)同步
數(shù)據(jù)庫與數(shù)據(jù)庫之間數(shù)據(jù)如何同步
在前面說到了數(shù)據(jù)的備份,這里我們試著去探討備份的機(jī)制,加入數(shù)據(jù)庫在A時(shí)間備份,在A時(shí)間向后的2個(gè)小時(shí)出現(xiàn)了問題,那么A時(shí)間后的2個(gè)小時(shí)數(shù)據(jù)就已經(jīng)沒有了,所以備份的機(jī)制就顯得比較重要了。
工具/原料sqlyog1首先我們需要連接到我們自己的mysql數(shù)據(jù)庫
2連接數(shù)據(jù)庫成功后,在數(shù)據(jù)庫的控制面板里找到增強(qiáng)工具,點(diǎn)擊增強(qiáng)工具在展開的菜單項(xiàng)中點(diǎn)擊【數(shù)據(jù)庫同步向?qū)А?/p>
3這里不需要做任何的改動直接點(diǎn)擊【下一步】就可以了
4我們在左邊的來源填寫來源數(shù)據(jù)庫,在右邊的目標(biāo)選擇同步到的目標(biāo)數(shù)據(jù)庫,將來源和目標(biāo)數(shù)據(jù)庫配置完成,點(diǎn)擊下一步
5選擇同步的模式:選擇單向同步模式或者雙向同步模式,單向和雙向具體的差別,在下面圖中說的比較詳細(xì),這里我就不多做描述了。
6接著選擇需要同步的數(shù)據(jù)表,將需要同步的表名前面勾選上
本地sql數(shù)據(jù)庫怎么與遠(yuǎn)程sql數(shù)據(jù)庫同步?
MySQL
MySQL數(shù)據(jù)同步主要有三種方式:
1.利用MySQL自身的數(shù)據(jù)庫同步功能
2.利用MySQL數(shù)據(jù)庫的特性(數(shù)據(jù)庫存在固頂目錄,并且以文件形式存儲),進(jìn)行數(shù)據(jù)庫目錄同步以達(dá)到數(shù)據(jù)同步目的
3.利用專用的MySQL數(shù)據(jù)庫同步軟件
1.利用MySQL自身的數(shù)據(jù)庫同步功能(下面參考自網(wǎng)上的文章,寫的非常詳細(xì)了)
MySQL從3.23.15版本以后提供數(shù)據(jù)庫復(fù)制功能。利用該功能可以實(shí)現(xiàn)兩個(gè)數(shù)據(jù)庫同步,主從模式,互相備份模式的功能.
數(shù)據(jù)庫同步復(fù)制功能的設(shè)置都在mysql的設(shè)置文件中體現(xiàn)。mysql的配置文件(一般是my.cnf),在unix環(huán)境下在/etc/mysql/my.cnf或者在mysql用戶的home目錄下的my.cnf。
windows環(huán)境中,如果c:根目錄下有my.cnf文件則取該配置文件。當(dāng)運(yùn)行mysql的winmysqladmin.exe工具時(shí)候,該工具會把c:根目錄下的my.cnf命名為mycnf.bak。并在winnt目錄下創(chuàng)建my.ini。mysql服務(wù)器啟動時(shí)候會讀該配置文件。所以可以把my.cnf中的內(nèi)容拷貝到my.ini文件中,用my.ini文件作為mysql服務(wù)器的配置文件。
設(shè)置方法:
設(shè)置范例環(huán)境:
操作系統(tǒng):window2023professional
mysql:4.0.4-beta-max-nt-log
Aip:10.10.10.22
Bip:10.10.10.53
A:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號:
GRANTFILEON*.*TObackup@’10.10.10.53’IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫作為同步數(shù)據(jù)庫:
createdatabasebackup
B:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號:
GRANTFILEON*.*TObackup@’10.10.10.22’IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫作為同步數(shù)據(jù)庫:
createdatabasebackup
主從模式:A->B
A為master
修改Amysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=1
log-bin
#設(shè)置需要記錄log可以設(shè)置log-bin=c:mysqlbakmysqllog設(shè)置日志文件的目錄,
#其中mysqllog是日志文件的名稱,mysql將建立不同擴(kuò)展名,文件名為mysqllog的幾個(gè)日志文件。
binlog-do-db=backup#指定需要日志的數(shù)據(jù)庫
重起數(shù)據(jù)庫服務(wù)。
用showmasterstatus命令看日志情況。
B為slave
修改Bmysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=2
master-host=10.10.10.22
master-user=backup#同步用戶帳號
master-password=1234
master-port=3306
master-connect-retry=60預(yù)設(shè)重試間隔60秒
replicate-do-db=backup告訴slave只做backup數(shù)據(jù)庫的更新
重起數(shù)據(jù)庫
用showslavestatus看同步配置情況。
注意:由于設(shè)置了slave的配置信息,mysql在數(shù)據(jù)庫目錄下生成master.info
所以如有要修改相關(guān)slave的配置要先刪除該文件。否則修改的配置不能生效。
雙機(jī)互備模式。
如果在A加入slave設(shè)置,在B加入master設(shè)置,則可以做B->A的同步。
在A的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
master-host=10.10.10.53
master-user=backup
master-password=1234
replicate-do-db=backup
master-connect-retry=10
在B的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
log-bin=c:mysqllogmysqllog
binlog-do-db=backup
注意:當(dāng)有錯(cuò)誤產(chǎn)生時(shí)*.err日志文件。同步的線程退出,當(dāng)糾正錯(cuò)誤后要讓同步機(jī)制進(jìn)行工作,運(yùn)行slavestart
重起AB機(jī)器,則可以實(shí)現(xiàn)雙向的熱備。
測試:
向B批量插入大數(shù)據(jù)量表AA()條
A數(shù)據(jù)庫每秒鐘可以更新2500條數(shù)據(jù)。
2.數(shù)據(jù)庫目錄同步,方法和文件同步一樣,設(shè)置好需要同步的兩個(gè)數(shù)據(jù)庫目錄就可以了!
缺點(diǎn)很明顯,數(shù)據(jù)同步只能單向進(jìn)行,可以作為備份方案
3.用專用的MySQL同步軟件進(jìn)行同步
這方面的軟件有SQLBalance和MyReplicator,優(yōu)點(diǎn)是方便直觀,還有很多爭強(qiáng)功能!
缺點(diǎn)和2一樣,只能單項(xiàng)同步!
當(dāng)然你也可以修改鏡像網(wǎng)站的程序?yàn)樘峤粩?shù)據(jù)到母數(shù)據(jù)庫,讀取則在當(dāng)前鏡像下的數(shù)據(jù),不過,修改起來麻煩!普通用戶修改也非常難!呵呵,大家了解一下就可以!給大家一個(gè)思路!有能力的朋友可以試試阿!
4.關(guān)于MySQL論壇的數(shù)據(jù)同步
由于數(shù)據(jù)來源的不可控制(不好表達(dá)),論壇數(shù)據(jù)是實(shí)時(shí)的,而且還要考慮來自鏡像論壇的數(shù)據(jù),如何實(shí)現(xiàn)鏡像論壇與母論壇數(shù)據(jù)同步呢?
用1中介紹的MySQL自帶的數(shù)據(jù)庫同步功能互相備份模式就可以實(shí)現(xiàn)的!
不過,具體的應(yīng)用我沒有測試!穩(wěn)定性不敢保證!
有能力的朋友推薦用下面這種思路來同步,相對來說減少點(diǎn)效率,但能減少發(fā)生的錯(cuò)誤!
比如鏡像論壇數(shù)據(jù)同步:
1.母論壇和鏡像論壇的數(shù)據(jù)全寫在母論壇數(shù)據(jù)庫里,主從模式,讀取只在本地讀取,這個(gè)需要修改程序!
2.每次寫數(shù)據(jù),都同時(shí)提交到兩個(gè)數(shù)據(jù)庫中,安全,但是效率很差,也得修改程序!
MSSQL
MSSQL數(shù)據(jù)同步利用數(shù)據(jù)庫復(fù)制技術(shù)實(shí)現(xiàn)數(shù)據(jù)同步更新(來自網(wǎng)絡(luò),也是非常完美的教程)
復(fù)制的概念
復(fù)制是將一組數(shù)據(jù)從一個(gè)數(shù)據(jù)源拷貝到多個(gè)數(shù)據(jù)源的技術(shù),是將一份數(shù)據(jù)發(fā)布到多個(gè)存儲站點(diǎn)上的有效方式。使用復(fù)制技術(shù),用戶可以將一份數(shù)據(jù)發(fā)布到多臺服務(wù)器上,從而使不同的服務(wù)器用戶都可以在權(quán)限的許可的范圍內(nèi)共享這份數(shù)據(jù)。復(fù)制技術(shù)可以確保分布在不同地點(diǎn)的數(shù)據(jù)自動同步更新,從而保證數(shù)據(jù)的一致性。
SQL復(fù)制的基本元素包括
出版服務(wù)器、訂閱服務(wù)器、分發(fā)服務(wù)器、出版物、文章
SQL復(fù)制的工作原理
SQLSERVER主要采用出版物、訂閱的方式來處理復(fù)制。源數(shù)據(jù)所在的服務(wù)器是出版服務(wù)器,負(fù)責(zé)發(fā)表數(shù)據(jù)。出版服務(wù)器把要發(fā)表的數(shù)據(jù)的所有改變情況的拷貝復(fù)制到分發(fā)服務(wù)器,分發(fā)服務(wù)器包含有一個(gè)分發(fā)數(shù)據(jù)庫,可接收數(shù)據(jù)的所有改變,并保存這些改變,再把這些改變分發(fā)給訂閱服務(wù)器
SQLSERVER復(fù)制技術(shù)類型
SQLSERVER提供了三種復(fù)制技術(shù),分別是:
1、快照復(fù)制(呆會我們就使用這個(gè))
2、事務(wù)復(fù)制
3、合并復(fù)制
只要把上面這些概念弄清楚了那么對復(fù)制也就有了一定的理解。接下來我們就一步一步來實(shí)現(xiàn)復(fù)制的步驟。
之一先來配置出版服務(wù)器
(1)選中指定節(jié)點(diǎn)
(2)從下拉菜單的子菜單中選擇命令
(3)系統(tǒng)彈出一個(gè)對話框點(diǎn)然后看著提示一直操作到完成。
(4)當(dāng)完成了出版服務(wù)器的設(shè)置以后系統(tǒng)會為該服務(wù)器的樹形結(jié)構(gòu)中添加一個(gè)復(fù)制監(jiān)視器。同時(shí)也生成一個(gè)分發(fā)數(shù)據(jù)庫(distribution)
第二創(chuàng)建出版物
(1)選中指定的服務(wù)器
(2)從菜單的子菜單中選擇命令。此時(shí)系統(tǒng)會彈出一個(gè)對話框
(3)選擇要創(chuàng)建出版物的數(shù)據(jù)庫,然后單擊
(4)在的提示對話框中單擊系統(tǒng)就會彈出一個(gè)對話框。對話框上的內(nèi)容是復(fù)制的三個(gè)類型。我們現(xiàn)在選之一個(gè)也就是默認(rèn)的快照發(fā)布(其他兩個(gè)大家可以去看看幫助)
(5)單擊系統(tǒng)要求指定可以訂閱該發(fā)布的數(shù)據(jù)庫服務(wù)器類型,SQLSERVER允許在不同的數(shù)據(jù)庫如ORACLE或ACCESS之間進(jìn)行數(shù)據(jù)復(fù)制。但是在這里我們選擇運(yùn)行”SQLSERVER2023″的數(shù)據(jù)庫服務(wù)器
(6)單擊系統(tǒng)就彈出一個(gè)定義文章的對話框也就是選擇要出版的表
(7)然后直到操作完成。當(dāng)完成出版物的創(chuàng)建后創(chuàng)建出版物的數(shù)據(jù)庫也就變成了一個(gè)共享數(shù)據(jù)庫。
第三設(shè)計(jì)訂閱
(1)選中指定的訂閱服務(wù)器
(2)從下拉菜單中選擇子菜單的
(3)按照單擊操作直到系統(tǒng)會提示檢查SQLSERVER代理服務(wù)的運(yùn)行狀態(tài),執(zhí)行復(fù)制操作的前提條件是SQLSERVER代理服務(wù)必須已經(jīng)啟動。
(4)單擊。完成訂閱操作。
完成上面的步驟其實(shí)復(fù)制也就是成功了。但是如何來知道復(fù)制是否成功了呢?這里可以通過這種方法來快速看是否成功。展開出版服務(wù)器下面的復(fù)制——發(fā)布內(nèi)容——右鍵發(fā)布內(nèi)容——屬性——擊活——狀態(tài)然后點(diǎn)立即運(yùn)行代理程序接著點(diǎn)代理程序?qū)傩該艋钫{(diào)度把調(diào)度設(shè)置為每一天發(fā)生,每一分鐘,在0:00:00和23:59:59之間。接下來就是判斷復(fù)制是否成功了打開C:/ProgramFiles/MicrosoftSQLServer/MSSQL/REPLDATA/unc/XIAOWANGZI_database_database下面看是不是有一些以時(shí)間做為文件名的文件夾差不多一分中就產(chǎn)生一個(gè)。要是你還不信的話就打開你的數(shù)據(jù)庫看在訂閱的服務(wù)器的指定訂閱數(shù)據(jù)庫下看是不是看到了你剛才所發(fā)布的表—
一個(gè)手工同步的方案
–定時(shí)同步服務(wù)器上的數(shù)據(jù)
–例子:
–測試環(huán)境,SQLServer2023,遠(yuǎn)程服務(wù)器名:xz,用戶名為:sa,無密碼,測試數(shù)據(jù)庫:test
–服務(wù)器上的表(查詢分析器連接到服務(wù)器上創(chuàng)建)
createtable(idintprimarykey,numbervarchar(4),namevarchar(10))
go
–以下在局域網(wǎng)(本機(jī)操作)
–本機(jī)的表,state說明:null表示新增記錄,1表示修改過的記錄,0表示無變化的記錄
ifexists(select*fromdbo.sysobjectswhereid=object_id(N”)andOBJECTPROPERTY(id,N’IsUserTable’)=1)
droptable
GO
createtable(idintidentity(1,1),numbervarchar(4),namevarchar(10),statebit)
go
–創(chuàng)建觸發(fā)器,維護(hù)state字段的值
createtriggert_stateon
afterupdate
as
updatesetstate=1
fromajoininsertedbona.id=b.id
wherea.stateisnotnull
go
–為了方便同步處理,創(chuàng)建鏈接服務(wù)器到要同步的服務(wù)器
–這里的遠(yuǎn)程服務(wù)器名為:xz,用戶名為:sa,無密碼
ifexists(select1frommaster..sysserverswheresrvname=’srv_lnk’)
execsp_dropserver’srv_lnk’,’droplogins’
go
execsp_addlinkedserver’srv_lnk’,”,’SQLOLEDB’,’xz’
execsp_addlinkedsrvlogin’srv_lnk’,’false’,null,’sa’
go
–創(chuàng)建同步處理的存儲過程
ifexists(select*fromdbo.sysobjectswhereid=object_id(N’.
‘)andOBJECTPROPERTY(id,N’IsProcedure’)=1)
dropprocedure.
GO
createprocp_synchro
as
–setXACT_ABORTon
–啟動遠(yuǎn)程服務(wù)器的MSDTC服務(wù)
–execmaster..xp_cmdshell’isql/S”xz”/U”sa”/P””/q”execmaster..xp_cmdshell”netstartmsdtc”,no_output”‘,no_output
–啟動本機(jī)的MSDTC服務(wù)
–execmaster..xp_cmdshell’netstartmsdtc’,no_output
–進(jìn)行分布事務(wù)處理,如果表用標(biāo)識列做主鍵,用下面的方法
–BEGINDISTRIBUTEDTRANSACTION
–同步刪除的數(shù)據(jù)
deletefromsrv_lnk.test.dbo.
whereidnotin(selectidfrom)
–同步新增的數(shù)據(jù)
insertintosrv_lnk.test.dbo.
selectid,number,namefromwherestateisnull
–同步修改的數(shù)據(jù)
updatesrv_lnk.test.dbo.set
number=b.number,name=b.name
fromsrv_lnk.test.dbo.a
joinbona.id=b.id
whereb.state=1
–同步后更新本機(jī)的標(biāo)志
updatesetstate=0whereisnull(state,1)=1
–COMMITTRAN
go
–創(chuàng)建作業(yè),定時(shí)執(zhí)行數(shù)據(jù)同步的存儲過程
ifexists(SELECT1frommsdb..sysjobswherename=’數(shù)據(jù)處理’)
EXECUTEmsdb.dbo.sp_delete_job@job_name=’數(shù)據(jù)處理’
execmsdb..sp_add_job@job_name=’數(shù)據(jù)處理’
–創(chuàng)建作業(yè)步驟
declare@sqlvarchar(800),@dbnamevarchar(250)
select@sql=’execp_synchro’–數(shù)據(jù)處理的命令
,@dbname=db_name()–執(zhí)行數(shù)據(jù)處理的數(shù)據(jù)庫名
execmsdb..sp_add_jobstep@job_name=’數(shù)據(jù)處理’,
@step_name=’數(shù)據(jù)同步’,
@subsystem=’TSQL’,
@database_name=@dbname,
@command=@sql,
@retry_attempts=5,–重試次數(shù)
@retry_interval=5–重試間隔
–創(chuàng)建調(diào)度
EXECmsdb..sp_add_jobschedule@job_name=’數(shù)據(jù)處理’,
@name=’時(shí)間安排’,
@freq_type=4,–每天
@freq_interval=1,–每天執(zhí)行一次
@active_start_time=點(diǎn)執(zhí)行
go
MySQL
MySQL數(shù)據(jù)同步主要有三種方式:
1.利用MySQL自身的數(shù)據(jù)庫同步功能
2.利用MySQL數(shù)據(jù)庫的特性(數(shù)據(jù)庫存在固頂目錄,并且以文件形式存儲),進(jìn)行數(shù)據(jù)庫目錄同步以達(dá)到數(shù)據(jù)同步目的
3.利用專用的MySQL數(shù)據(jù)庫同步軟件
1.利用MySQL自身的數(shù)據(jù)庫同步功能(下面參考自網(wǎng)上的文章,寫的非常詳細(xì)了)
MySQL從3.23.15版本以后提供數(shù)據(jù)庫復(fù)制功能。利用該功能可以實(shí)現(xiàn)兩個(gè)數(shù)據(jù)庫同步,主從模式,互相備份模式的功能.
數(shù)據(jù)庫同步復(fù)制功能的設(shè)置都在mysql的設(shè)置文件中體現(xiàn)。mysql的配置文件(一般是my.cnf),在unix環(huán)境下在/etc/mysql/my.cnf或者在mysql用戶的home目錄下的my.cnf。
windows環(huán)境中,如果c:根目錄下有my.cnf文件則取該配置文件。當(dāng)運(yùn)行mysql的winmysqladmin.exe工具時(shí)候,該工具會把c:根目錄下的my.cnf命名為mycnf.bak。并在winnt目錄下創(chuàng)建my.ini。mysql服務(wù)器啟動時(shí)候會讀該配置文件。所以可以把my.cnf中的內(nèi)容拷貝到my.ini文件中,用my.ini文件作為mysql服務(wù)器的配置文件。
設(shè)置方法:
設(shè)置范例環(huán)境:
操作系統(tǒng):window2023professional
mysql:4.0.4-beta-max-nt-log
Aip:10.10.10.22
Bip:10.10.10.53
A:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號:
GRANTFILEON*.*TObackup@’10.10.10.53’IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫作為同步數(shù)據(jù)庫:
createdatabasebackup
B:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號:
GRANTFILEON*.*TObackup@’10.10.10.22’IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫作為同步數(shù)據(jù)庫:
createdatabasebackup
主從模式:A->B
A為master
修改Amysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=1
log-bin
#設(shè)置需要記錄log可以設(shè)置log-bin=c:mysqlbakmysqllog設(shè)置日志文件的目錄,
#其中mysqllog是日志文件的名稱,mysql將建立不同擴(kuò)展名,文件名為mysqllog的幾個(gè)日志文件。
binlog-do-db=backup#指定需要日志的數(shù)據(jù)庫
重起數(shù)據(jù)庫服務(wù)。
用showmasterstatus命令看日志情況。
B為slave
修改Bmysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=2
master-host=10.10.10.22
master-user=backup#同步用戶帳號
master-password=1234
master-port=3306
master-connect-retry=60預(yù)設(shè)重試間隔60秒
replicate-do-db=backup告訴slave只做backup數(shù)據(jù)庫的更新
重起數(shù)據(jù)庫
用showslavestatus看同步配置情況。
注意:由于設(shè)置了slave的配置信息,mysql在數(shù)據(jù)庫目錄下生成master.info
所以如有要修改相關(guān)slave的配置要先刪除該文件。否則修改的配置不能生效。
雙機(jī)互備模式。
如果在A加入slave設(shè)置,在B加入master設(shè)置,則可以做B->A的同步。
在A的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
master-host=10.10.10.53
master-user=backup
master-password=1234
replicate-do-db=backup
master-connect-retry=10
在B的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
log-bin=c:mysqllogmysqllog
binlog-do-db=backup
注意:當(dāng)有錯(cuò)誤產(chǎn)生時(shí)*.err日志文件。同步的線程退出,當(dāng)糾正錯(cuò)誤后要讓同步機(jī)制進(jìn)行工作,運(yùn)行slavestart
重起AB機(jī)器,則可以實(shí)現(xiàn)雙向的熱備。
測試:
向B批量插入大數(shù)據(jù)量表AA()條
A數(shù)據(jù)庫每秒鐘可以更新2500條數(shù)據(jù)。
2.數(shù)據(jù)庫目錄同步,方法和文件同步一樣,設(shè)置好需要同步的兩個(gè)數(shù)據(jù)庫目錄就可以了!
缺點(diǎn)很明顯,數(shù)據(jù)同步只能單向進(jìn)行,可以作為備份方案
3.用專用的MySQL同步軟件進(jìn)行同步
這方面的軟件有SQLBalance和MyReplicator,優(yōu)點(diǎn)是方便直觀,還有很多爭強(qiáng)功能!
缺點(diǎn)和2一樣,只能單項(xiàng)同步!
當(dāng)然你也可以修改鏡像網(wǎng)站的程序?yàn)樘峤粩?shù)據(jù)到母數(shù)據(jù)庫,讀取則在當(dāng)前鏡像下的數(shù)據(jù),不過,修改起來麻煩!普通用戶修改也非常難!呵呵,大家了解一下就可以!給大家一個(gè)思路!有能力的朋友可以試試阿!
4.關(guān)于MySQL論壇的數(shù)據(jù)同步
由于數(shù)據(jù)來源的不可控制(不好表達(dá)),論壇數(shù)據(jù)是實(shí)時(shí)的,而且還要考慮來自鏡像論壇的數(shù)據(jù),如何實(shí)現(xiàn)鏡像論壇與母論壇數(shù)據(jù)同步呢?
用1中介紹的MySQL自帶的數(shù)據(jù)庫同步功能互相備份模式就可以實(shí)現(xiàn)的!
不過,具體的應(yīng)用我沒有測試!穩(wěn)定性不敢保證!
有能力的朋友推薦用下面這種思路來同步,相對來說減少點(diǎn)效率,但能減少發(fā)生的錯(cuò)誤!
比如鏡像論壇數(shù)據(jù)同步:
1.母論壇和鏡像論壇的數(shù)據(jù)全寫在母論壇數(shù)據(jù)庫里,主從模式,讀取只在本地讀取,這個(gè)需要修改程序!
2.每次寫數(shù)據(jù),都同時(shí)提交到兩個(gè)數(shù)據(jù)庫中,安全,但是效率很差,也得修改程序!
MSSQL
MSSQL數(shù)據(jù)同步利用數(shù)據(jù)庫復(fù)制技術(shù)實(shí)現(xiàn)數(shù)據(jù)同步更新(來自網(wǎng)絡(luò),也是非常完美的教程)
復(fù)制的概念
復(fù)制是將一組數(shù)據(jù)從一個(gè)數(shù)據(jù)源拷貝到多個(gè)數(shù)據(jù)源的技術(shù),是將一份數(shù)據(jù)發(fā)布到多個(gè)存儲站點(diǎn)上的有效方式。使用復(fù)制技術(shù),用戶可以將一份數(shù)據(jù)發(fā)布到多臺服務(wù)器上,從而使不同的服務(wù)器用戶都可以在權(quán)限的許可的范圍內(nèi)共享這份數(shù)據(jù)。復(fù)制技術(shù)可以確保分布在不同地點(diǎn)的數(shù)據(jù)自動同步更新,從而保證數(shù)據(jù)的一致性。
SQL復(fù)制的基本元素包括
出版服務(wù)器、訂閱服務(wù)器、分發(fā)服務(wù)器、出版物、文章
SQL復(fù)制的工作原理
SQLSERVER主要采用出版物、訂閱的方式來處理復(fù)制。源數(shù)據(jù)所在的服務(wù)器是出版服務(wù)器,負(fù)責(zé)發(fā)表數(shù)據(jù)。出版服務(wù)器把要發(fā)表的數(shù)據(jù)的所有改變情況的拷貝復(fù)制到分發(fā)服務(wù)器,分發(fā)服務(wù)器包含有一個(gè)分發(fā)數(shù)據(jù)庫,可接收數(shù)據(jù)的所有改變,并保存這些改變,再把這些改變分發(fā)給訂閱服務(wù)器
SQLSERVER復(fù)制技術(shù)類型
SQLSERVER提供了三種復(fù)制技術(shù),分別是:
1、快照復(fù)制(呆會我們就使用這個(gè))
2、事務(wù)復(fù)制
3、合并復(fù)制
只要把上面這些概念弄清楚了那么對復(fù)制也就有了一定的理解。接下來我們就一步一步來實(shí)現(xiàn)復(fù)制的步驟。
之一先來配置出版服務(wù)器
(1)選中指定節(jié)點(diǎn)
(2)從下拉菜單的子菜單中選擇命令
(3)系統(tǒng)彈出一個(gè)對話框點(diǎn)然后看著提示一直操作到完成。
(4)當(dāng)完成了出版服務(wù)器的設(shè)置以后系統(tǒng)會為該服務(wù)器的樹形結(jié)構(gòu)中添加一個(gè)復(fù)制監(jiān)視器。同時(shí)也生成一個(gè)分發(fā)數(shù)據(jù)庫(distribution)
第二創(chuàng)建出版物
(1)選中指定的服務(wù)器
(2)從菜單的子菜單中選擇命令。此時(shí)系統(tǒng)會彈出一個(gè)對話框
(3)選擇要創(chuàng)建出版物的數(shù)據(jù)庫,然后單擊
(4)在的提示對話框中單擊系統(tǒng)就會彈出一個(gè)對話框。對話框上的內(nèi)容是復(fù)制的三個(gè)類型。我們現(xiàn)在選之一個(gè)也就是默認(rèn)的快照發(fā)布(其他兩個(gè)大家可以去看看幫助)
(5)單擊系統(tǒng)要求指定可以訂閱該發(fā)布的數(shù)據(jù)庫服務(wù)器類型,SQLSERVER允許在不同的數(shù)據(jù)庫如ORACLE或ACCESS之間進(jìn)行數(shù)據(jù)復(fù)制。但是在這里我們選擇運(yùn)行”SQLSERVER2023″的數(shù)據(jù)庫服務(wù)器
(6)單擊系統(tǒng)就彈出一個(gè)定義文章的對話框也就是選擇要出版的表
(7)然后直到操作完成。當(dāng)完成出版物的創(chuàng)建后創(chuàng)建出版物的數(shù)據(jù)庫也就變成了一個(gè)共享數(shù)據(jù)庫。
第三設(shè)計(jì)訂閱
(1)選中指定的訂閱服務(wù)器
(2)從下拉菜單中選擇子菜單的
(3)按照單擊操作直到系統(tǒng)會提示檢查SQLSERVER代理服務(wù)的運(yùn)行狀態(tài),執(zhí)行復(fù)制操作的前提條件是SQLSERVER代理服務(wù)必須已經(jīng)啟動。
(4)單擊。完成訂閱操作。
完成上面的步驟其實(shí)復(fù)制也就是成功了。但是如何來知道復(fù)制是否成功了呢?這里可以通過這種方法來快速看是否成功。展開出版服務(wù)器下面的復(fù)制——發(fā)布內(nèi)容——右鍵發(fā)布內(nèi)容——屬性——擊活——狀態(tài)然后點(diǎn)立即運(yùn)行代理程序接著點(diǎn)代理程序?qū)傩該艋钫{(diào)度把調(diào)度設(shè)置為每一天發(fā)生,每一分鐘,在0:00:00和23:59:59之間。接下來就是判斷復(fù)制是否成功了打開C:/ProgramFiles/MicrosoftSQLServer/MSSQL/REPLDATA/unc/XIAOWANGZI_database_database下面看是不是有一些以時(shí)間做為文件名的文件夾差不多一分中就產(chǎn)生一個(gè)。要是你還不信的話就打開你的數(shù)據(jù)庫看在訂閱的服務(wù)器的指定訂閱數(shù)據(jù)庫下看是不是看到了你剛才所發(fā)布的表—
一個(gè)手工同步的方案
–定時(shí)同步服務(wù)器上的數(shù)據(jù)
–例子:
–測試環(huán)境,SQLServer2023,遠(yuǎn)程服務(wù)器名:xz,用戶名為:sa,無密碼,測試數(shù)據(jù)庫:test
–服務(wù)器上的表(查詢分析器連接到服務(wù)器上創(chuàng)建)
createtable(idintprimarykey,numbervarchar(4),namevarchar(10))
go
–以下在局域網(wǎng)(本機(jī)操作)
–本機(jī)的表,state說明:null表示新增記錄,1表示修改過的記錄,0表示無變化的記錄
ifexists(select*fromdbo.sysobjectswhereid=object_id(N”)andOBJECTPROPERTY(id,N’IsUserTable’)=1)
droptable
GO
createtable(idintidentity(1,1),numbervarchar(4),namevarchar(10),statebit)
go
–創(chuàng)建觸發(fā)器,維護(hù)state字段的值
createtriggert_stateon
afterupdate
as
updatesetstate=1
fromajoininsertedbona.id=b.id
wherea.stateisnotnull
go
–為了方便同步處理,創(chuàng)建鏈接服務(wù)器到要同步的服務(wù)器
–這里的遠(yuǎn)程服務(wù)器名為:xz,用戶名為:sa,無密碼
ifexists(select1frommaster..sysserverswheresrvname=’srv_lnk’)
execsp_dropserver’srv_lnk’,’droplogins’
go
execsp_addlinkedserver’srv_lnk’,”,’SQLOLEDB’,’xz’
execsp_addlinkedsrvlogin’srv_lnk’,’false’,null,’sa’
go
–創(chuàng)建同步處理的存儲過程
ifexists(select*fromdbo.sysobjectswhereid=object_id(N’.
‘)andOBJECTPROPERTY(id,N’IsProcedure’)=1)
dropprocedure.
GO
createprocp_synchro
as
–setXACT_ABORTon
–啟動遠(yuǎn)程服務(wù)器的MSDTC服務(wù)
–execmaster..xp_cmdshell’isql/S”xz”/U”sa”/P””/q”execmaster..xp_cmdshell”netstartmsdtc”,no_output”‘,no_output
–啟動本機(jī)的MSDTC服務(wù)
–execmaster..xp_cmdshell’netstartmsdtc’,no_output
–進(jìn)行分布事務(wù)處理,如果表用標(biāo)識列做主鍵,用下面的方法
–BEGINDISTRIBUTEDTRANSACTION
–同步刪除的數(shù)據(jù)
deletefromsrv_lnk.test.dbo.
whereidnotin(selectidfrom)
–同步新增的數(shù)據(jù)
insertintosrv_lnk.test.dbo.
selectid,number,namefromwherestateisnull
–同步修改的數(shù)據(jù)
updatesrv_lnk.test.dbo.set
number=b.number,name=b.name
fromsrv_lnk.test.dbo.a
joinbona.id=b.id
whereb.state=1
–同步后更新本機(jī)的標(biāo)志
updatesetstate=0whereisnull(state,1)=1
–COMMITTRAN
go
–創(chuàng)建作業(yè),定時(shí)執(zhí)行數(shù)據(jù)同步的存儲過程
ifexists(SELECT1frommsdb..sysjobswherename=’數(shù)據(jù)處理’)
EXECUTEmsdb.dbo.sp_delete_job@job_name=’數(shù)據(jù)處理’
execmsdb..sp_add_job@job_name=’數(shù)據(jù)處理’
–創(chuàng)建作業(yè)步驟
declare@sqlvarchar(800),@dbnamevarchar(250)
select@sql=’execp_synchro’–數(shù)據(jù)處理的命令
,@dbname=db_name()–執(zhí)行數(shù)據(jù)處理的數(shù)據(jù)庫名
execmsdb..sp_add_jobstep@job_name=’數(shù)據(jù)處理’,
@step_name=’數(shù)據(jù)同步’,
@subsystem=’TSQL’,
@database_name=@dbname,
@command=@sql,
@retry_attempts=5,–重試次數(shù)
@retry_interval=5–重試間隔
–創(chuàng)建調(diào)度
EXECmsdb..sp_add_jobschedule@job_name=’數(shù)據(jù)處理’,
@name=’時(shí)間安排’,
@freq_type=4,–每天
@freq_interval=1,–每天執(zhí)行一次
@active_start_time=點(diǎn)執(zhí)行
go
參考資料:
有個(gè)數(shù)據(jù)庫,怎么實(shí)現(xiàn)數(shù)據(jù)同步
為方便完成指定數(shù)棚輪攔據(jù)表的同步操作,可以采用dblink與merge結(jié)合的方法完成。
操作環(huán)境: 此數(shù)據(jù)庫服務(wù)器ip為192.168.196.76,有center與branch兩個(gè)庫,一般需要將center的表數(shù)據(jù)同步到branch,center為源庫,branch為目標(biāo)庫,具體步驟如下:
1.在源庫創(chuàng)建到目標(biāo)庫的dblink
create database link branch輸入所要創(chuàng)建dblink的名稱,自定義 connect to dbuser identified by “password” –設(shè)置連接遠(yuǎn)程數(shù)據(jù)庫的用戶名和密碼 using ‘192.168.196.76/branch’; –指定目標(biāo)數(shù)鏈胡據(jù)庫桐嘩的連接方式,可用tns名稱
異地?cái)?shù)據(jù)庫同步的介紹就聊到這里吧,感謝你花時(shí)間閱讀本站內(nèi)容,更多關(guān)于異地?cái)?shù)據(jù)庫同步,實(shí)現(xiàn)高效數(shù)據(jù)交流——異地?cái)?shù)據(jù)庫同步技術(shù)實(shí)踐,數(shù)據(jù)庫與數(shù)據(jù)庫之間數(shù)據(jù)如何同步,本地sql數(shù)據(jù)庫怎么與遠(yuǎn)程sql數(shù)據(jù)庫同步?,有個(gè)數(shù)據(jù)庫,怎么實(shí)現(xiàn)數(shù)據(jù)同步的信息別忘了在本站進(jìn)行查找喔。
成都創(chuàng)新互聯(lián)建站主營:成都網(wǎng)站建設(shè)、網(wǎng)站維護(hù)、網(wǎng)站改版的網(wǎng)站建設(shè)公司,提供成都網(wǎng)站制作、成都網(wǎng)站建設(shè)、成都網(wǎng)站推廣、成都網(wǎng)站優(yōu)化seo、響應(yīng)式移動網(wǎng)站開發(fā)制作等網(wǎng)站服務(wù)。
標(biāo)題名稱:實(shí)現(xiàn)高效數(shù)據(jù)交流——異地?cái)?shù)據(jù)庫同步技術(shù)實(shí)踐(異地?cái)?shù)據(jù)庫同步)
網(wǎng)頁鏈接:http://www.dlmjj.cn/article/dpsshjj.html


咨詢
建站咨詢
