基于Web Service的数据库同步系统的设计与实现

摘 要

　　结合当前流行的Web Service和ADO.NET技术构造了一个不受平台限制的异构数据库同步系统。实现了处于Internet上的Sql Server2000向Oracle 的单向同步功能，能够基于IP的安全身份验证功能,多个IP实现了净量数据的传输。对同步的配置信息采用XML存储，采用Windows应用程序界面化配置，操作方便、易懂。

　　因为同步环境是对处于Internet上的异构数据库的实时同步；在设计与开发中，重点关注异构数据库的同步以及数据传输的可靠性；探讨能实现可靠数据的同步，以及传输的高效性。介绍了实现系统的思路以及所需的关键技术。系统用到的相关技术有捕获技术Windows 托盘服务、多线程处理、以及网络消息机制、多IP同步、同步IP权限验证、同步表名及字段以及字段类型的可配置、异构数据类型的转换、Web Service等。

The Design and Implementation of Database Synchronization System Based on Web Service

Abstract

　　
　　We can construct the Heterogeneous database synchronous system using Web Service. It has realized the function of one-way synchronous from SQL Server2000 to Oracle. It has some functions, the security authentication of IP, the data transmission of IP, the Synchronization configuration using XML storage and the windows application program UI which can make this system be operated easily.

　　Because the synchronous environment will be real-time synchronous for heterogeneous database on the Internet, in the design and implementation, this system has showed the synchronization of heterogeneous database and data transmission reliability, achieving the synchronization of reliable data, the security methods of data transmission, and the efficiency transmission. It will display the ideas of realization and the necessary critical technologies. There are some relevant technologies that this system used, for example, the capture technology, the windows tray service, multi-thread processing, and the network news mechanism, and so on.

目  录
论文总页数：24页
1 引言 1
1.1 课题背景 1
1.2 国内外研究现状 1
1.3 本课题研究的意义 2
1.4 本课题的研究方法 2
2 WEB SERVICE数据库同步原理 3
2.1 WEB SERVICE构成与特点 3
2.1.1 Web Servcie的结构 3
2.1.2 Web Servcie的关键技术---协议 3
2.1.3 Web Servcie的特点 4
2.1.4 Web Servcie安全 5
2.2 数据库复制的分类 5
2.3 复制数据的类型 6
2.4 数据捕获技术 7
2.5 冲突检测 8
3 需求分析 9
3.1 同步环境 9
3.2 功能需求 9
3.3 性能需求 10
3.4 输入输出要求 10
3.5 运行需求 10
4 方案设计 11
4.1 数据库同步复制模型 11
4.2 数据库设计 11
4.2.1 源结点Sql Server 2000表设计 11
4.2.2 目的结点Oracle表设计 12
4.3 模块设计 13
4.3.1 数据捕获部分 13
4.3.2 同步部分 13
4.3.3 冲突检测处理部分 16
5 代码实现 16
5.1 开发环境 16
5.2 关键代码详解。 16
5.2.1 数据捕获部分 16
5.2.2 同步部分 17
6 测试 19
6.1 功能测试 19
6.2 性能测试 20
结    论 21
参考文献 21
致    谢 23
声    明 24

1 引言

　1.1 课题背景

　　随着信息化建设的深入，企业和政府如何将己有的"信息孤岛"连通起来，实现信息的集成与共享是当前需要解决的一个关键问题。特别是企业和政府部门多数采用层次管理摸式，各个部门、分支机构可能处于Internet上的不同区域，上下级机构之间需要进行大量的数据汇总与分发，实现整个企业或政府部门的数据集成。这种数据集成是从一个或多个数据库中抽取数据，经过远程传输处理后再加载到另一个数据库中。各分支机构数据库系统又包括异构的与同构的，这里的异构可以是操作系统的异构，可以是数据库管理系统的异构，也可以是数据库内部表结构的异构。

　　然而，分布式数据库系统既要提供局部自治又要实现全局控制，给数据的同步带来了很大的挑战性。如何在不同组织之间、不同类型、不同平台的数据库系统之间进行数据同步工作，是数据库领域一个研究方向。特别是对于异构的情况。Web Service的出现使异构数据库同步的情况变得较为容易实现，因为它是一种完全的无语言相关性、无平台相关性、无对象相关性的模型。非常适合于Internet上的数据集成。

　
　1.3 本课题研究的意义

　　分布式数据库大量的应用，各种应用之间又有很多的交叉性。数据库同步就显得很重要；特别是异构的情况，然而异构数据库之间的同步不能应用数据库自带的同步工具。另一方面，由于两者分布在Internet中，防火墙的存在使得同步无法使用特定端口通讯。但因为大多数企业会开放用于HTTP的80端口，因而借助Web Service可以完成两者的通讯。数据表要进行的操作，以XML形式编码作为消息内容。借助XML的无语言相关性、无平台相关性、无对象相关性来实现异构数据库的同步，也可应用结构相同的分布式数据库上。

　　3.2 功能需求

　　本设计要实现的功能：

　　1. 能够使处于Internet 上的异构数据库的单向同步功能,初步先实现Sql Server2000向Oracle 与的同步，需要考虑其它数据库的情况比如my Sql等。

　　2. 同步数据需要可靠的传输，保证数据能够准确、完全的传输到被同步的一方。

　　3. 同步需要一定安全性，能够按照进行同步IP或则物理地址来验证同步身份。

　　4. 由于数据在Internet上传输，必须保证同步数据的传输开销小，安全等。

　　5. 能够实现不同主机的多个数据库同时同步功能。

　　6. 对实时性同步、定期同步可配置，既可以选择实时同步、手动同步或则按需要同步的数据量来同步。

　　7. 同步信息可以配置性。同步信息包括：同步的字段、字段类型、同步的表、分配了权限的同步主机等。

　　8. 同步的数据类型能够是不同的类型，比如数值型向字符型的同步等。能够对同步的某个字段做特殊的处理后再同步。既是能够实现多个字段合并为一个字段，或则一个、多个字段分解为更多个字段。

　　9. 同步的配置界面化，操作方便、易使用。

　　10. 对网络连接断开后能够保证同步数据的不丢失，网络连上后能接着继续同步。

　　11. 对异常的信息提示尽量多，比如配置系统时对不正确的配置及时提示，以便产生同步的异常。

　　12. 当是多个数据库同步到一个数据库时需要解决同步冲突。

　　13. 系统需要有一定扩展性。