建站
咨詢
售后
建站咨詢
新聞中心
幾種從Oracle數(shù)據(jù)庫(kù)或其它如文本文件、MariaDB (or MySQL for that matter)獲取數(shù)據(jù)的方法。Oracle數(shù)據(jù)庫(kù)可不愿意你這樣做，因此需要做一些必要的調(diào)整。其中一種方式就是使用觸發(fā)器，UDF, UPD-communication 和簡(jiǎn)單的服務(wù)器，這是 從Oracle到MariaDB的同步復(fù)制方式系列文章***部分。也就是說(shuō)從Oracle導(dǎo)出數(shù)據(jù)到文本文件是Oracle所不愿意看到的。它希望你把數(shù)據(jù)保存在它里面，圍繞它開(kāi)展工作，現(xiàn)在你可以使用Oracle dump工具。這已經(jīng)很好了且能正常處理大多數(shù)Oracle的數(shù)據(jù)類型。
為薩迦等地區(qū)用戶提供了全套網(wǎng)頁(yè)設(shè)計(jì)制作服務(wù)，及薩迦網(wǎng)站建設(shè)行業(yè)解決方案。主營(yíng)業(yè)務(wù)為成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)、薩迦網(wǎng)站設(shè)計(jì)，以傳統(tǒng)方式定制建設(shè)網(wǎng)站，并提供域名空間備案等一條龍服務(wù)，秉承以專業(yè)、用心的態(tài)度為用戶提供真誠(chéng)的服務(wù)。我們深信只要達(dá)到每一位用戶的要求，就會(huì)得到認(rèn)可，從而選擇與我們長(zhǎng)期合作。這樣，我們也可以走得更遠(yuǎn)！
對(duì)于復(fù)制，如果不使用觸發(fā)器或其它機(jī)制，那么使用開(kāi)源的東西可能是比較好的了，或者可以不使用說(shuō)明特殊工具來(lái)做嗎?一種方式是在Oracle的前面放一個(gè)代理。這非常有用，但是需要花費(fèi)太多時(shí)間來(lái)開(kāi)發(fā)并且要熟悉Oracle的通訊協(xié)議，可我不愿意這樣做(我承認(rèn)我很懶)。
因此現(xiàn)在我只能嘗試其他方式來(lái)直接從Oracle復(fù)制數(shù)據(jù)。在后面我將演示一個(gè)實(shí)際的例子來(lái)做此事，不需要太多代碼，但現(xiàn)在我先解釋它是如何工作的。更為困難是如果正確的得到Oracle中的數(shù)據(jù)，所以這一系列博客的***部分將更多的對(duì)Oracle進(jìn)行相關(guān)說(shuō)明，這是一個(gè)好理由(比如：得到可用的而不必自己實(shí)現(xiàn)) ，讓我們開(kāi)始吧。
現(xiàn)在開(kāi)始，Oracle中沒(méi)有 二進(jìn)制日志(binlog) (也沒(méi)有修改日志)。Oracle有重做日志 ，InnoDB/XtraDB 也是使用的這種方式，它們都是基于同樣的目的 —在崩潰發(fā)生時(shí)能恢復(fù)數(shù)據(jù)庫(kù)。 由于重做日志要達(dá)成此目的，因此它記錄了比binlog更低層次日志。數(shù)據(jù)庫(kù)中任何修改事件都能夠從Oracle的重做日志中找到，包括很多Oracle的內(nèi)部處理。Oracle在后臺(tái)做了很多東西，與MariaDB強(qiáng)烈依賴操作系統(tǒng)不同它會(huì)會(huì)更多使用自己的內(nèi)部管理，比如文件空間管理等類似的東西。 當(dāng)然這并不是說(shuō)在這一方面Oracle比MariaDB更好，或與此相反，Oracle誕生的年代你不得不支持多種不同的操作系統(tǒng)，因此在在某些方面就需要設(shè)計(jì)得透明的(即設(shè)計(jì)得更抽象，高層次不必依賴操作系統(tǒng)實(shí)現(xiàn))。同時(shí)Oracle誕生的年代多數(shù)磁盤(pán)大小僅為5MB，因此很多都是一些保守做法 (這暴露了我的年齡，是的，我的出生日期早于Mille Small主打歌曲 "My Boy Lollipop"。 與流行的看法相反，它不是Rod Stewart使用口琴獨(dú)奏的那首。 ,結(jié)束了今天的“無(wú)用的知識(shí)”課).
在我們進(jìn)入詳細(xì)查看Oracle重做日志之前，我想先解釋一些東西。在Oracle中還有另外一個(gè)文件，它很小但是卻很重要，叫著控制文件。控制文件用于跟蹤記錄其它所有文件和關(guān)聯(lián)的數(shù)據(jù)庫(kù)設(shè)置。對(duì)于重做日志，有兩個(gè)用途。一個(gè)基礎(chǔ)方式是 非歸檔(NOARCHIVELOG)模式，意味著日志文件會(huì)被重用。這和InnoDB/XtraDB的日志文件使用方式相似，它目的也是提供一種手段來(lái)進(jìn)行崩潰后恢復(fù)。想象一下，需要使用這些日志文件進(jìn)行某一個(gè)時(shí)間點(diǎn)的恢復(fù)，前提是你保存了這些文件，比如：進(jìn)行了物理備份且保存了這些文件。對(duì)于MariaDB，我們會(huì)使用binlog進(jìn)行時(shí)間點(diǎn)的恢復(fù)。
使用重做日志的目的就是可以對(duì)Oracle進(jìn)行時(shí)間點(diǎn)的恢復(fù)，我們不得不保存重做日志，在歸檔模式下Oracle有一個(gè)單獨(dú)的進(jìn)程"archive"來(lái)做，也就是當(dāng)日志寫(xiě)滿切換日志時(shí)把日志保存在其它地方。所有這一切，當(dāng)前的和歸檔的重置日志文件都被記錄在Oracle的控制文件中。
這些Oracle知識(shí)對(duì)于理解代碼如何工作是非常重要的。還有一個(gè)我需要簡(jiǎn)要的討論一下，就是Oracle的ROWID。ROWID 是Oracle中表的數(shù)據(jù)行的唯一標(biāo)識(shí)。ROWID實(shí)際上是一個(gè)物理地址。在某些情況下，當(dāng)表屬于聚集表時(shí)相同的ROWID可用于兩個(gè)不同的表，但是對(duì)一個(gè)表來(lái)說(shuō)，里面的ROWID是唯一標(biāo)識(shí)了一行。 使用表的ROWID，可以使用偽列ROWID，它可以用在WHERE和SELECT語(yǔ)句中。
因此，現(xiàn)在我們要靈活運(yùn)用上面這些知識(shí)。Oracle的重做日志包含了數(shù)據(jù)庫(kù)的變化，因此我們可以使用重做日志來(lái)達(dá)成MariaDB中binlog相同的目的，如：復(fù)制。為了做復(fù)制，我們首先需要能夠讀取重做日志，我們可以讀取重做日志文件，但卻相當(dāng)復(fù)雜，如果你堅(jiān)持這樣做，你可以閱讀 這個(gè)文檔 中的例子，但我認(rèn)為這不是一個(gè)好主意。相反，我們應(yīng)該使用Oracle的工具。對(duì)于我們感興趣的DML，我們需要復(fù)制處理表的INSERT, UPDATE和DELETE語(yǔ)句，然后在在事務(wù)的結(jié)束處提交。對(duì)于這些操作，我們希望重做日志中包含如下這些數(shù)據(jù)：
- 操作類型
- 表的唯一標(biāo)識(shí) (不是表名)
- 列和值的變化
- 行的ROWID
- SCN (系統(tǒng)變更號(hào)).
現(xiàn)在我需要說(shuō)一說(shuō)SCN。SCN非常簡(jiǎn)單;它是一個(gè)48位整型數(shù)標(biāo)記了一個(gè)事務(wù)，每開(kāi)始一個(gè)新事務(wù)它就向上增加。你可以獲取表中***更改的SCN，實(shí)際上是row所在塊的SCN(你可以跟蹤ROW的變化。有很多奇奇怪怪的選項(xiàng)來(lái)滿足用戶的需求。)。
在我寫(xiě)完這篇博文之前，我想演示下怎么從重做日志文件獲取數(shù)據(jù)的代碼。在你詢問(wèn)之前，oracle沒(méi)有重做日志單元，或類似這樣的工具。這不是MariaDB，這是Oracle數(shù)據(jù)庫(kù)。Oracle數(shù)據(jù)庫(kù)的工具本身幾乎不是工具，而是 Oracle PL/SQL包。在此例子中是日志分析，或者是一個(gè)類似DBMS_LOGMNR包。想要日志分析工作，我們需要在歸檔模式下運(yùn)行數(shù)據(jù)庫(kù)。所以如果你新安裝了Oracle數(shù)據(jù)庫(kù)，請(qǐng)以特權(quán)用戶進(jìn)行登錄：
- $ sqlplus / as sysdba
然后運(yùn)行以下命令:
- SQL> SHUTDOWN IMMEDIATE;
- SQL> STARTUP MOUNT;
- SQL> ALTER DATABASE ARCHIVELOG;
- SQL> ALTER DATABASE OPEN;
此外，為了從日志分析中獲得所有數(shù)據(jù)，我們必須在重做日志中加入"supplemental data"。這意味著我還沒(méi)有看其中的數(shù)據(jù)，但是如果你想看數(shù)據(jù)請(qǐng)相信我。在同個(gè) SQL*Plus窗口，運(yùn)行：
- SQL> ALTER DATABASE ADD SUPPLEMENTAL LOG DATA;
我們可以在此開(kāi)始分析日志。這包含兩個(gè)步驟：***，開(kāi)始分析日志本身，然后選擇一張表存儲(chǔ)分析日志。讓我們看下怎樣用SQL腳本開(kāi)始分析日志。調(diào)用腳本startlog.sql:
- column min_scn new_value startscn
- column current_scn new_value endscn
- SELECT MIN(FIRST_CHANGE#) min_scn FROM v$log;
- SELECT current_scn FROM v$database;
- EXECUTE DBMS_LOGMNR.START_LOGMNR(STARTSCN => &startscn, -
- ENDSCN => &endscn, -
- OPTIONS => DBMS_LOGMNR.COMMITTED_DATA_ONLY + -
- DBMS_LOGMNR.CONTINUOUS_MINE + -
- DBMS_LOGMNR.DICT_FROM_ONLINE_CATALOG);
- SET ARRAYSIZE 1
然后運(yùn)行腳本，因?yàn)槟_本里不含明顯的退出語(yǔ)句，所以腳本執(zhí)行后還是會(huì)看到SQL*Plus的命令提示符。這和 MariaDB命令行工作方式是不同的。
- $ sqlplus / as sysdba @startlog.sql
現(xiàn)在我們可以獲取一下日志數(shù)據(jù)，比方說(shuō)我們有張表稱為T(mén)1，并且已經(jīng)在T1上做了些改動(dòng)，那我們可以用如下語(yǔ)句獲取相關(guān)記錄：
- SQL> SELECT sql_redo FROM v$logmnr_contents WHERE table_name = 'T1' AND seg_owner = 'ANDERS' AND operation IN ('INSERT', 'UPDATE', 'DELETE');
- SQL_REDO
- --------------------------------------------------------------------------------
- insert into "ANDERS"."T1"("C1","C2") values ('1','2');
- insert into "ANDERS"."T1"("C1","C2") values ('2','2');
- update "ANDERS"."T1" set "C2" = '3' where "C2" = '2' and ROWID = 'AAAE5KAAEAAAAFfAAA';
- update "ANDERS"."T1" set "C2" = '3' where "C2" = '2' and ROWID = 'AAAE5KAAEAAAAFfAAB';
這似乎不完整!但里面的有些內(nèi)容可能是有意義的，對(duì)么?有關(guān)此系列的下篇博文我們會(huì)進(jìn)行嘗試。這篇博文或多或少都是關(guān)于Oracle數(shù)據(jù)庫(kù)的，在下篇博文中將更多描述有關(guān)復(fù)制到MariaDB的內(nèi)容，MariaDB也是我們想讓數(shù)據(jù)存儲(chǔ)的地方，不是么?
快樂(lè)的SQL編程吧!
當(dāng)前題目：從Oracle到MariaDB的同步復(fù)制
分享URL：http://www.dlmjj.cn/article/djddjeh.html
