圖書(shū)館管理系統(tǒng)與校園一卡通系統(tǒng)關(guān)于數(shù)據(jù)同步機(jī)制的研究

文章出處：http://m.luckydriving.com 作者：王涌,柏強(qiáng),周密 人氣： 發(fā)表時(shí)間：2010年07月29日

在大學(xué)，兩種或多種數(shù)據(jù)服務(wù)交叉的場(chǎng)點(diǎn)非常多。例如：圖書(shū)館。這樣的場(chǎng)點(diǎn)，也稱(chēng)為數(shù)據(jù)服務(wù)問(wèn)題點(diǎn)，由于沒(méi)有解決好多路ISP數(shù)據(jù)流整合和同步，出現(xiàn)應(yīng)用滯后或技術(shù)支持缺乏，或者是花了錢(qián)沒(méi)有達(dá)到實(shí)際效果，硬件兼容和搭配、控制系統(tǒng)高度集成，最終形成多路數(shù)據(jù)融合，是數(shù)據(jù)服務(wù)的重要個(gè)功能，本文研究校園一卡通在圖書(shū)館系統(tǒng)中的應(yīng)用。討論基于解析歸檔日志模式的數(shù)據(jù)同步機(jī)制，為不同服務(wù)間數(shù)據(jù)融合提供支持。

1 數(shù)據(jù)同步功能

在圖書(shū)館，實(shí)現(xiàn)IC借閱功能，涉及兩路數(shù)據(jù)服務(wù)，因此，數(shù)據(jù)同步也是雙向的，如圖1所示，一是圖書(shū)館自動(dòng)化管理系統(tǒng)數(shù)據(jù)同步，再就是一卡通系統(tǒng)數(shù)據(jù)同步，下面對(duì)其功能分別描述興邦。

1.1 一卡通數(shù)據(jù)同步

圖書(shū)管理系統(tǒng)對(duì)每一位借閱者分配唯一認(rèn)證編碼，或以條形碼式生成。一卡通系統(tǒng)需要完成的功能如下：

（1）身份認(rèn)證

通過(guò)聯(lián)機(jī)終端上的射頻卡機(jī)，讀取寫(xiě)在卡內(nèi)存儲(chǔ)芯片上專(zhuān)儲(chǔ)區(qū)域內(nèi)的認(rèn)證編碼，直接在前端完成和圖書(shū)管理系統(tǒng)的數(shù)據(jù)交換。由于畢業(yè)、掛失、離校等因素．各自獨(dú)立的后臺(tái)數(shù)據(jù)庫(kù)需要身份認(rèn)證的完整性和一致性約束，這就要做系統(tǒng)問(wèn)的數(shù)據(jù)同步。

(2)代扣款項(xiàng)

各個(gè)端口的POS機(jī)通過(guò)采集系統(tǒng)把數(shù)據(jù)傳送到交易平臺(tái)的前置機(jī)，該數(shù)據(jù)直接提供給財(cái)務(wù)部門(mén)作為核算憑證，完成支付。由于圖書(shū)管理系統(tǒng)中很多服務(wù)涉及到扣款項(xiàng)目，如賠償、罰款、復(fù)印、在線(xiàn)查閱等，需要和一卡通系統(tǒng)支付平臺(tái)建立數(shù)據(jù)同步，保證賬戶(hù)數(shù)據(jù)的準(zhǔn)確性。

1.2圖書(shū)館數(shù)據(jù)同步

完善的圖書(shū)管理系統(tǒng)，一般采用C／S(數(shù)據(jù)庫(kù)一中間層一客戶(hù)端)、B／S (數(shù)據(jù)庫(kù)一Web服務(wù)器一瀏覽器)兩種模式的架構(gòu)。底層數(shù)據(jù)庫(kù)采用Oracle、Sql Server等，提供通用的ODBC數(shù)據(jù)接口?？梢詫?shí)現(xiàn)與第三方軟件無(wú)縫連接，完成數(shù)據(jù)交換。

(1)讀卡模式

發(fā)卡、寫(xiě)卡(寫(xiě)身份認(rèn)證到卡的專(zhuān)儲(chǔ)區(qū)域)由一卡通服務(wù)授權(quán)方負(fù)責(zé)，一卡通開(kāi)發(fā)商提供讀卡動(dòng)態(tài)鏈接庫(kù)。ILAS(自動(dòng)圖書(shū)館管理系統(tǒng))提供一個(gè)讀卡程序，singbon將讀到的證號(hào)發(fā)送給ILAS客戶(hù)端相關(guān)程序，完成借、還管理，該模式不涉及扣款等消費(fèi)功能。

(2)同步模式

實(shí)時(shí)接收讀者信息、掛失、注銷(xiāo)及扣款等功能的實(shí)現(xiàn)，需要保持異步數(shù)據(jù)庫(kù)表與表項(xiàng)對(duì)特征描述的一致性?？缙脚_(tái)數(shù)據(jù)交換的中心是同步服務(wù)程序，也是一個(gè)開(kāi)放的接口服務(wù)程序，多路數(shù)據(jù)服務(wù)都可以向該接口發(fā)送信息(只要他知道了該接口的地址)，只有擁有一定權(quán)限的用戶(hù)才能從接口中收取相關(guān)數(shù)據(jù)并處理該數(shù)據(jù)。在沒(méi)有第三方提供標(biāo)準(zhǔn)接口時(shí)，只能由數(shù)據(jù)服務(wù)雙方或多方開(kāi)發(fā)同步服務(wù)程序。

1.3同步功能描述

由于討論的是基于兩種服務(wù)的數(shù)據(jù)同步，因此要建立各自的同步軟件，功能描述如下：

(1)一卡通中心軟件方實(shí)現(xiàn)功能如下：

一卡通服務(wù)程序?qū)崟r(shí)將請(qǐng)求(新增讀者、修改讀者記錄、換卡、掛失、注銷(xiāo)等)發(fā)送給ILAS服務(wù)程序，如果操作失敗(或網(wǎng)絡(luò)不通、超時(shí)等異常發(fā)生時(shí))。一卡通服務(wù)程序需將該次請(qǐng)求(相關(guān)信息)記錄下來(lái)(采用文件，或數(shù)據(jù)庫(kù)方式)；然后定時(shí)將這些失敗請(qǐng)求重新發(fā)送給ILAS服務(wù)程序進(jìn)行處理。

(2)ILAS系統(tǒng)實(shí)現(xiàn)功能如下：

ILAS系統(tǒng)將接收到的服務(wù)請(qǐng)求進(jìn)行分析，進(jìn)行相應(yīng)的校園一卡通處理(新增讀者、換卡、掛失、注銷(xiāo)等操作)，并將操作結(jié)果返回給一卡通服務(wù)程序。

2基于解析歸檔日志的數(shù)據(jù)同步

由于一個(gè)校園或一個(gè)社區(qū)，存在多種類(lèi)數(shù)據(jù)服務(wù)交織，不同的開(kāi)發(fā)技術(shù)和后臺(tái)數(shù)據(jù)庫(kù)，造成它們之間數(shù)據(jù)分離。另一方面，整體行政管理帶來(lái)電子數(shù)據(jù)交換需求，這就要求實(shí)施數(shù)據(jù)同步。

解析歸檔日志這種技術(shù)現(xiàn)在應(yīng)用的比較廣泛，Quest公司的shareplex軟件、DSG公司的realsync和Oracle的Stream都是這樣的產(chǎn)品。那么，它能做什么呢?實(shí)現(xiàn)數(shù)據(jù)庫(kù)容錯(cuò)和異構(gòu)、異地?cái)?shù)據(jù)庫(kù)完整性和一致性。

2.1歸檔日志的概念

數(shù)據(jù)庫(kù)系統(tǒng)提供記錄對(duì)庫(kù)操作的所有DML語(yǔ)句的日志文件組，該文件組采取循環(huán)重寫(xiě)，只要數(shù)據(jù)庫(kù)運(yùn)行在歸檔模式并且設(shè)置自動(dòng)歸檔為“真”，才能產(chǎn)生永久保存的歸檔日志。它的內(nèi)容包括：數(shù)據(jù)庫(kù)的更改歷史、更改類(lèi)型(INSERT、UPDATE、DELETE、DDL等)、更改對(duì)應(yīng)的SCN號(hào)以及執(zhí)行這些操作的用戶(hù)信息等。

2.2歸檔日志解析

歸檔日志的解析首先要確定數(shù)據(jù)庫(kù)問(wèn)的主從關(guān)系，目的是隨著主數(shù)據(jù)庫(kù)邏輯結(jié)構(gòu)的改變而重置從數(shù)據(jù)庫(kù)。保持異構(gòu)或異地?cái)?shù)據(jù)庫(kù)的同步，這里的邏輯結(jié)構(gòu)包含表、表項(xiàng)及記錄等。解析過(guò)程其實(shí)就是源操作的分解過(guò)程，重構(gòu)等價(jià)的SQL語(yǔ)句。具體如圖2所示。

2．3 Oracle的Stream

Oracle Stream 利用高級(jí)隊(duì)列技術(shù)。從庫(kù)與主庫(kù)可以是不同的操作系統(tǒng)平臺(tái)，也可以是多對(duì)一的建立關(guān)聯(lián)。通過(guò)解析歸檔日志，將歸檔日志解析成DDL及DML語(yǔ)句，對(duì)從數(shù)據(jù)庫(kù)組實(shí)施追加操作，實(shí)現(xiàn)數(shù)據(jù)庫(kù)之間的同步。這種技術(shù)可以將整個(gè)主數(shù)據(jù)庫(kù)、數(shù)據(jù)庫(kù)中的對(duì)象備份為一個(gè)新庫(kù)，對(duì)歸檔日志和關(guān)聯(lián)的備份庫(kù)進(jìn)行數(shù)據(jù)解析，進(jìn)而在對(duì)主庫(kù)及相關(guān)一卡通支付平臺(tái)沒(méi)有任何采集與更新壓力的情況下，實(shí)現(xiàn)對(duì)主數(shù)據(jù)庫(kù)組及表、對(duì)象、表項(xiàng)，甚至整個(gè)數(shù)據(jù)庫(kù)組的同步。

2.4系統(tǒng)配置示例

(1)一卡通數(shù)據(jù)平臺(tái)和交易平臺(tái)

服務(wù)器(舊M小型機(jī)9133—55A)配置：IBM P6 55A (4 X 2．1GHz CPU、16GB內(nèi)存、2 X 146G硬盤(pán)、2 X 4GB HBA光纖卡、DVD、磁帶機(jī)、雙口網(wǎng)卡、顯卡、異步卡AIX6 1操作系統(tǒng)、HA軟件)后臺(tái)數(shù)據(jù)庫(kù)：Oracle Database 1OGFOR lBM Al×5L

(2)ILAS系統(tǒng)

服務(wù)器： 浪潮英信NF5280(XeonE5520／2GB／1 46GB)系統(tǒng)：SCO(UNIX)OPEN SERVER RE—LEASE 5 O 7

圖1一卡通借閱同步服務(wù)示意圖

圖2主從式歸檔解析示意圖

3 結(jié)束語(yǔ)

基于異構(gòu)平臺(tái)的數(shù)據(jù)同步方法很多，如消息隊(duì)列法、觸發(fā)器法。比較各種方法，考慮數(shù)據(jù)傳輸、交換的瞬時(shí)性和突發(fā)性，需要加強(qiáng)對(duì)數(shù)據(jù)平臺(tái)的保護(hù)，特別是對(duì)由數(shù)據(jù)平臺(tái)和支付平臺(tái)組成和一卡通系統(tǒng)尤為重要。雙向數(shù)據(jù)同步，源數(shù)據(jù)和目標(biāo)數(shù)據(jù)具有動(dòng)態(tài)性．歸檔日志解析，通過(guò)建立多級(jí)備份，實(shí)現(xiàn)對(duì)聯(lián)動(dòng)操作的限制和過(guò)濾，保證了數(shù)據(jù)安全。本文是我們完成圖書(shū)管理系統(tǒng)和一卡通系統(tǒng)數(shù)據(jù)同步工作的總結(jié)，被立為三亞市科信局2009年批準(zhǔn)項(xiàng)目。校園一卡通