如何实现同步两个服务器的数据库？

同步两个SQLServer数据库

如何同步两个sqlserver数据库的内容?程序代码可以有版本管理cvs进行同步管理,可是数据库同步就非常麻烦,只能自己改了一个后再去改另一个,如果忘记了更改另一个经常造成两个数据库的结构或内容上不一致.各位有什么好的方法吗?

一、分发与复制

用强制订阅实现数据库同步操作. 大量和批量的数据可以用数据库的同步机制处理:

//

说明：

为方便操作,所有操作均在发布服务器(分发服务器)上操作,并使用推模式

在客户机器使用强制订阅方式。

二、测试通过

1:环境

服务器环境:

机器名称： zehuadb

操作系统：windows 2000 server

数据库版本：sql 2000 server 个人版

客户端

机器名称：zlp

操作系统：windows 2000 server

数据库版本：sql 2000 server 个人版

2:建用户帐号

在服务器端建立域用户帐号

我的电脑管理->本地用户和组->用户->建立

username:zlp

userpwd:zlp

3:重新启动服务器mssqlserver

我的电脑->控制面版->管理工具->服务->mssqlserver 服务

(更改为：域用户帐号,我们新建的zlp用户 .\zlp,密码:zlp)

4:安装分发服务器

a:配置分发服务器

工具->复制->配置发布、订阅服务器和分发->下一步->下一步(所有的均采用默认配置)

b:配置发布服务器

工具->复制->创建和管理发布->选择要发布的数据库(sz)->下一步->快照发布->下一步->选择要发布的内容->下一步->下一步->下一步->完成

c:强制配置订阅服务器(推模式,拉模式与此雷同)

工具->复制->配置发布、订阅服务器和分发->订阅服务器->新建->sql server数据库->输入客户端服务器名称(zlp)->使用sql server 身份验证(sa,空密码)->确定->应用->确定

d:初始化订阅

复制监视器->发布服务器(zehuadb)->双击订阅->强制新建->下一步->选择启用的订阅服务器->zlp->下一步->下一步->下一步->下一步->完成

5:测试配置是否成功

复制监视器->发布衿?zehuadb)->双击sz:sz->点状态->点立即运行代理程序

查看：

复制监视器->发布服务器(zehuadb)->sz:sz->选择zlp:sz(类型强制)->鼠标右键->启动同步处理

如果没有错误标志(红色叉)，恭喜您配置成功

6:测试数据

在服务器执行:

选择一个表，执行如下sql:insert into wq_newsgroup_s select '测试成功',5

复制监视器->发布服务器(zehuadb)->sz:sz->快照->启动代理程序 ->zlp:sz(强制)->启动同步处理

去查看同步的 wq_newsgroup_s 是否插入了一条新的记录

测试完毕，通过。

7:修改数据库的同步时间,一般选择夜晚执行数据库同步处理

(具体操作略) :d

/*

注意说明：

服务器一端不能以(local)进行数据的发布与分发,需要先删除注册，然后新建注册本地计算机名称

卸载方式：工具->复制->禁止发布->是在"zehuadb"上静止发布,卸载所有的数据库同步配置服务器

注意：发布服务器、分发服务器中的sqlserveragent服务必须启动

采用推模式: "d:\microsoft sql server\mssql\repldata\unc" 目录文件可以不设置共享

拉模式:则需要共享~!

*/

少量数据库同步可以采用触发器实现,同步单表即可。

三、配置过程中可能出现的问题

在sql server 2000里设置和使用数据库复制之前，应先检查相关的几台sql server服务器下面几点是否满足：

1、mssqlserver和sqlserveragent服务是否是以域用户身份启动并运行的（.\administrator用户也是可以的）

如果登录用的是本地系统帐户local，将不具备网络功能，会产生以下错误:

进程未能连接到distributor '@server name'

(如果您的服务器已经用了sql server全文检索服务, 请不要修改mssqlserver和sqlserveragent服务的local启动。

会照成全文检索服务不能用。请换另外一台机器来做sql server 2000里复制中的分发服务器。)

修改服务启动的登录用户，需要重新启动mssqlserver和sqlserveragent服务才能生效。

2、检查相关的几台sql server服务器是否改过名称(需要srvid=0的本地机器上srvname和datasource一样)

在查询分析器里执行:

use master

select srvid,srvname,datasource from sysservers

如果没有srvid=0或者srvid=0（也就是本机器）但srvname和datasource不一样, 需要按如下方法修改:

use master

go

-- 设置两个变量

declare @serverproperty_servername varchar(100),

@servernamevarchar(100)

-- 取得windows nt 服务器和与指定的 sql server 实例关联的实例信息

select @serverproperty_servername = convert(varchar(100), serverproperty('servername'))

-- 返回运行 microsoft sql server 的本地服务器名称

select @servername = convert(varchar(100), @@servername)

-- 显示获取的这两个参数

select @serverproperty_servername,@servername

--如果@serverproperty_servername和@servername不同(因为你改过计算机名字),再运行下面的

--删除错误的服务器名

exec sp_dropserver @server=@servername

--添加正确的服务器名

exec sp_addserver @server=@serverproperty_servername, @local='local'

修改这项参数，需要重新启动mssqlserver和sqlserveragent服务才能生效。

这样一来就不会在创建复制的过程中出现18482、18483错误了。

3、检查sql server企业管理器里面相关的几台sql server注册名是否和上面第二点里介绍的srvname一样

不能用ip地址的注册名。

（我们可以删掉ip地址的注册，新建以sql server管理员级别的用户注册的服务器名）

这样一来就不会在创建复制的过程中出现14010、20084、18456、18482、18483错误了。

4、检查相关的几台sql server服务器网络是否能够正常访问

如果ping主机ip地址可以，但ping主机名不通的时候，需要在

winnt\system32\drivers\etc\hosts (win2000)

windows\system32\drivers\etc\hosts (win2003)

文件里写入数据库服务器ip地址和主机名的对应关系。

例如：

127.0.0.1 localhost

192.168.0.35oracledboracledb

192.168.0.65fengyu02fengyu02

202.84.10.193 bj_db bj_db

或者在sql server客户端网络实用工具里建立别名，例如:

5、系统需要的扩展存储过程是否存在(如果不存在，需要恢复):

sp_addextendedproc 'xp_regenumvalues',@dllname ='xpstar.dll'

go

sp_addextendedproc 'xp_regdeletevalue',@dllname ='xpstar.dll'

go

sp_addextendedproc 'xp_regdeletekey',@dllname ='xpstar.dll'

go

sp_addextendedproc xp_cmdshell ,@dllname ='xplog70.dll'

接下来就可以用sql server企业管理器里[复制]->右键选择 ->[配置发布、订阅服务器和分发]的图形界面来配置数据库复制了。

下面是按顺序列出配置复制的步骤:

1、建立发布和分发服务器

[欢迎使用配置发布和分发向导]->[选择分发服务器]->[使"@servername"成为它自己的分发服务器,sql server将创建分发数据库和日志]

->[制定快照文件夹]->[自定义配置] ->[否,使用下列的默认配置] ->[完成]

上述步骤完成后, 会在当前"@servername" sql server数据库里建立了一个distribion库和 一个distributor_admin管理员级别的用户(我们可以任意修改密码)。

服务器上新增加了四个作业:

[ 代理程序历史记录清除: distribution ]

[ 分发清除: distribution ]

[ 复制代理程序检查 ]

[ 重新初始化存在数据验证失败的订阅 ]

sql server企业管理器里多了一个复制监视器, 当前的这台机器就可以发布、分发、订阅了。

我们再次在sql server企业管理器里[复制]->右键选择 ->[配置发布、订阅服务器和分发]

我们可以在 [发布服务器和分发服务器的属性] 窗口->[发布服务器] ->[新增] ->[确定] ->[发布数据库] ->[事务]/[合并] ->[确定] ->[订阅服务器] ->[新增] ->[确定]

把网络上的其它sql server服务器添加成为发布或者订阅服务器.

新增一台发布服务器的选项：

我这里新建立的jin001发布服务器是用管理员级别的数据库用户test连接的，

到发布服务器的管理链接要输入密码的可选框, 默认的是选中的，

在新建的jin001发布服务器上建立和分发服务器fengyu/fengyu的链接的时需要输入distributor_admin用户的密码。到发布服务器的管理链接要输入密码的可选框，也可以不选，也就是不需要密码来建立发布到分发服务器的链接(这当然欠缺安全，在测试环境下可以使用)。

2、新建立的网络上另一台发布服务器(例如jin001)选择分发服务器

[欢迎使用配置发布和分发向导]->[选择分发服务器]

->使用下列服务器(选定的服务器必须已配置为分发服务器) ->[选定服务器](例如fengyu/fengyu)

->[下一步] ->[输入分发服务器（例如fengyu/fengyu）的distributor_admin用户的密码两次]

->[下一步] ->[自定义配置] ->[否，使用下列的默认配置]

->[下一步] ->[完成] ->[确定]

建立一个数据库复制发布的过程:

[复制] ->[发布内容] ->右键选择 ->[新建发布]

->[下一步] ->[选择发布数据库] ->[选中一个待发布的数据库]

->[下一步] ->[选择发布类型] ->[事务发布]/[合并发布]

->[下一步] ->[指定订阅服务器的类型] ->[运行sql server 2000的服务器]

->[下一步] ->[指定项目] ->[在事务发布中只可以发布带主键的表] ->[选中一个有主键的待发布的表]

->[在合并发布中会给表增加唯一性索引和 rowguidcol 属性的唯一标识符字段[rowguid],默认值是newid()]

(添加新列将: 导致不带列列表的 insert 语句失败,增加表的大小,增加生成第一个快照所要求的时间)

->[选中一个待发布的表]

->[下一步] ->[选择发布名称和描述] ->

->[下一步] ->[自定义发布的属性] ->[否，根据指定方式创建发布]

->[下一步] ->[完成] ->[关闭]

发布属性里有很多有用的选项：设定订阅到期(例如24小时)

设定发布表的项目属性:

常规窗口可以指定发布目的表的名称，可以跟原来的表名称不一样。

下图是命令和快照窗口的栏目

( sql server 数据库复制技术实际上是用insert,update,delete操作在订阅服务器上重做发布服务器上的事务操作

看文档资料需要把发布数据库设成完全恢复模式，事务才不会丢失

但我自己在测试中发现发布数据库是简单恢复模式下，每10秒生成一些大事务，10分钟后再收缩数据库日志，

这期间发布和订阅服务器上的作业都暂停，暂停恢复后并没有丢失任何事务更改 )

发布表可以做数据筛选，例如只选择表里面的部分列:

例如只选择表里某些符合条件的记录, 我们可以手工编写筛选的sql语句:

发布表的订阅选项，并可以建立强制订阅:

成功建立了发布以后,发布服务器上新增加了一个作业: [ 失效订阅清除 ]

分发服务器上新增加了两个作业:

[ jin001-dack-dack-5 ] 类型[ repl快照 ]

[ jin001-dack-3 ] 类型[ repl日志读取器 ]

上面蓝色字的名称会根据发布服务器名,发布名及第几次发布而使用不同的编号

repl快照作业是sql server复制的前提条件,它会先把发布的表结构,数据,索引,约束等生成到发布服务器的os目录下文件

(当有订阅的时候才会生成, 当订阅请求初始化或者按照某个时间表调度生成)

repl日志读取器在事务复制的时候是一直处于运行状态。(在合并复制的时候可以根据调度的时间表来运行)

建立一个数据库复制订阅的过程:

[复制] ->[订阅] ->右键选择 ->[新建请求订阅]

->[下一步] ->[查找发布] ->[查看已注册服务器所做的发布]

->[下一步] ->[选择发布] ->[选中已经建立发布服务器上的数据库发布名]

->[下一步] ->[指定同步代理程序登录] ->[当代理程序连接到代理服务器时:使用sql server身份验证]

(输入发布服务器上distributor_admin用户名和密码)

->[下一步] ->[选择目的数据库] ->[选择在其中创建订阅的数据库名]/[也可以新建一个库名]

->[下一步] ->[允许匿名订阅] ->[是，生成匿名订阅]

->[下一步] ->[初始化订阅] ->[是，初始化架构和数据]

->[下一步] ->[快照传送] ->[使用该发布的默认快照文件夹中的快照文件]

(订阅服务器要能访问发布服务器的repldata文件夹，如果有问题，可以手工设置网络共享及共享权限)

->[下一步] ->[快照传送] ->[使用该发布的默认快照文件夹中的快照文件]

->[下一步] ->[设置分发代理程序调度] ->[使用下列调度] ->[更改] ->[例如每五分钟调度一次]

->[下一步] ->[启动要求的服务] ->[该订阅要求在发布服务器上运行sqlserveragent服务]

->[下一步] ->[完成] ->[确定]

成功建立了订阅后，订阅服务器上新增加了一个类别是[repl-分发]作业(合并复制的时候类别是[repl-合并])

它会按照我们给的时间调度表运行数据库同步复制的作业。

3、sql server复制配置好后, 可能出现异常情况的实验日志:

1.发布服务器断网,sql server服务关闭,重启动,关机的时候,对已经设置好的复制没有多大影响

中断期间,分发和订阅都接收到没有复制的事务信息

2.分发服务器断网,sql server服务关闭,重启动,关机的时候,对已经设置好的复制有一些影响

中断期间,发布服务器的事务排队堆积起来

(如果设置了较长时间才删除过期订阅的选项, 繁忙发布数据库的事务日志可能会较快速膨胀),

订阅服务器会因为访问不到发布服务器,反复重试

我们可以设置重试次数和重试的时间间隔(最大的重试次数是9999, 如果每分钟重试一次,可以支持约6.9天不出错)

分发服务器sql server服务启动,网络接通以后,发布服务器上的堆积作业将按时间顺序作用到订阅机器上:

会需要一个比较长的时间(实际上是生成所有事务的insert,update,delete语句,在订阅服务器上去执行)

我们在普通的pc机上实验的58个事务100228个命令执行花了7分28秒.

3.订阅服务器断网,sql server服务关闭,重启动,关机的时候,对已经设置好的复制影响比较大,可能需要重新初试化

我们实验环境(订阅服务器)从18:46分意外停机以, 第二天8:40分重启动后, 已经设好的复制在8:40分以后又开始正常运行了, 发布服务器上的堆积作业将按时间顺序作用到订阅机器上, 但复制管理器里出现快照的错误提示, 快照可能需要重新初试化,复制可能需要重新启动.(我们实验环境的机器并没有进行快照初试化,复制仍然是成功运行的)

4、删除已经建好的发布和定阅可以直接用delete删除按钮

我们最好总是按先删定阅，再删发布，最后禁用发布的顺序来操作。

如果要彻底删去sql server上面的复制设置, 可以这样操作:

[复制] ->右键选择 [禁用发布] ->[欢迎使用禁用发布和分发向导]

->[下一步] ->[禁用发布] ->[要在"@servername"上禁用发布]

->[下一步] ->[完成禁用发布和分发向导] ->[完成]

我们也可以用t-sql命令来完成复制中发布及订阅的创建和删除, 选中已经设好的发布和订阅, 按属标右键可以[生成sql脚本]。(这里就不详细讲了, 后面推荐的网站内有比较详细的内容)

当你试图删除或者变更一个table时，出现以下错误

server: msg 3724, level 16, state 2, line 1

cannot drop the table 'object_name' because it is being used for replication.

比较典型的情况是该table曾经用于复制，但是后来又删除了复制。

处理办法：

select * from sysobjects where replinfo >'0'

sp_configure 'allow updates', 1

go

reconfigure with override

go

begin transaction

update sysobjects set replinfo = '0' where replinfo >'0'

commit transaction

go

rollback transaction

go

sp_configure 'allow updates', 0

go

reconfigure with override

go

通过web服务器访问MYSQL数据库有以下几个过程：

1、在MySql下创建自己的数据库和自己的表单

2、连接数据库。

3、访问数据库

1、创建web工程 （服务器端）

在Myeclipse下新建一个web项目，为了好统一管理在WEB-INF下建一个web.xml用来加载服务器启动时的配置信息。这个文件是由大量的<servlet></servlet>与<servlet-mapping></servlet-mapping>组成，这里只做讲解，

2、为了方便对数据库验证信息的统一管理，在src目录下建一个DBConfig.properties文件。包含内容有：连接mysql数据库的驱动、url、用户名和密码。

3、连接数据库

a、可以先在src目录下建一个工具类DBUtil.java用于连接和关闭数据库。具体代码如下。

1 package com.amaker.util

2

3 import java.sql.Connection

4 import java.sql.DriverManager

5 import java.sql.SQLException

6 import java.util.Properties

7

8 /**

9 *

10 * @author BlackhorseMary

11 */

12 public class DBUtil {

13

14 /*

15 * 关闭数据库连接

16 */

17 public void closeConn(Connection conn){

18 try {

19 conn.close()

20 } catch (SQLException e) {

21 e.printStackTrace()

22 }

23 }

24

25 /*

26 * 打开数据库连接

27 */

28 public Connection openConnection() {

29 Properties prop = new Properties()

30 String driver = null

31 String url = null

32 String username = null

33 String password = null

34

35 try {

36 prop.load(this.getClass().getClassLoader().getResourceAsStream(

37 "DBConfig.properties"))

38

39 driver = prop.getProperty("driver")

40 url = prop.getProperty("url")

41 username = prop.getProperty("username")

42 password = prop.getProperty("password")

43

44 Class.forName(driver)

45 return DriverManager.getConnection(url, username, password)

46 } catch (Exception e) {

47 e.printStackTrace()

48 }

49

50 return null

51 }

52

53 }

b、再在src目录下新建一个Menu.java,用于设置获取其属性。

1 package com.amaker.entity

2

3 public class Menu {

4 private int id

5 private int price

6 private int typeId

7 private String name

8 private String pic

9 private String remark

10

11 public int getId() {

12 return id

13 }

14 public void setId(int id) {

15 this.id = id

16 }

17 public String getName() {

18 return name

19 }

20 public void setName(String name) {

21 this.name = name

22 }

23 public String getPic() {

24 return pic

25 }

26 public void setPic(String pic) {

27 this.pic = pic

28 }

29 public int getPrice() {

30 return price

31 }

32 public void setPrice(int price) {

33 this.price = price

34 }

35 public String getRemark() {

36 return remark

37 }

38 public void setRemark(String remark) {

39 this.remark = remark

40 }

41 public int getTypeId() {

42 return typeId

43 }

44 public void setTypeId(int typeId) {

45 this.typeId = typeId

46 }

47

48 }

1 /**

2 * @author BlackhorseMary

3 *完成更新SQLite数据功能

4 */

5 public class Update {

6 // 获得菜单列表

7 public List<Menu>getMenuList() {

8 // 查询SQL语句

9 String sql =" select id,typeId,price,name,pic,remark from MenuTbl "

10 // 数据库连接工具类

11 DBUtil util = new DBUtil()

12 // 获得连接

13 Connection conn = util.openConnection()

14 try {

15 // 获得预定义语句

16 Statement pstmt = conn.createStatement()

17 // 执行查询

18 ResultSet rs = pstmt.executeQuery(sql)

19 // 判断订单详细

20 List<Menu>list = new ArrayList<Menu>()

21 while (rs.next()) {

22 // 获得菜单信息

23

24 int id = rs.getInt(1)

25 int typeId = rs.getInt(2)

26 int price = rs.getInt(3)

27 String name = rs.getString(4)

28 String pic = rs.getString(5)

29 String remark = rs.getString(6)

30

31 Menu m = new Menu()

32 m.setId(id)

33 m.setName(name)

34 m.setPic(pic)

35 m.setPrice(price)

36 m.setRemark(remark)

37 m.setTypeId(typeId)

38

39 list.add(m)

40 }

41 return list

42 } catch (SQLException e) {

43 e.printStackTrace()

44 } finally {

45 util.closeConn(conn)

46 }

47 return null

48 }

49

50 }

4、在src下建一个update.java类用于执行同步，即更新android SQLites数据库中的数据（前提是SQLite数据库里面有对应的Menu表）。

5、启动服务器，在浏览器中输入相应URL地址，可以把相应的SQLITE数据库导出来，用SQLITE数据库工具，查看数据库中Menu表的结果。

至此，大功告成。

不会的，下面是配置方法

首先，找一个干净的地方，创建空文件夹，例如在我的机器上，配置：

安装好所需要的相关库文件：

* libevent-dev (2.0 or later )

* libcurl4-openssl-dev (1.0.0 or later)

* libglib2.0-dev (2.28 or later)

* uuid-dev

* intltool (0.40 or later)

* libsqlite3-dev (3.7 or later)

* libmysqlclient-dev (5.5 or later)

* libarchive-dev

* libtool

* libjansson-dev

* valac

* libfuse-dev

安装2个重要库：

其中第一个可以用./configuremakemake install 安装，第二个用cmake。

然后，安装以下的python库：（可以用easy_install安装，sudo apt-get install python-setuptools）

* [https://www.djangoproject.com/download/1.5.2/tarball/ django 1.5]

* [https://github.com/djblets/djblets/tarball/release-0.6.14 djblets]

* sqlite3

* simplejson (python-simplejson)

* PIL (aka. python imaging library, python-image)

* chardet

* gunicorn

为了方便管理，把目录结构调整成这个样子：

然后到下面这几个目录去下载对应的源码，注意版本对应，我这里选择的是3.1.3版本。

* [https://github.com/haiwen/libsearpc/tags]

* [https://github.com/haiwen/ccnet/tags]

* [https://github.com/haiwen/seafile/tags]

* [https://github.com/haiwen/seahub/tags]

解压：

tar xf

把seafhub放到上一级目录去

所以整个目录结构就变成这样了：

开始编译！！

libsearpc

cd libsearpc-${version}

./autogen.sh

./configure

make

make install

ccnet

cd ccnet-${version}

./autogen.sh

./configure --disable-client --enable-server # `export PKG_CONFIG_PATH=/usr/local/lib/pkgconfig` if libsearpc is not found

make

make install

seafile

cd seafile-${version}

./autogen.sh

./configure --disable-client --enable-server

make

make install

继续，利用ccnet-init和seaf-server-init初始化

ccnet-init --config-dir=/home/netlab/NSDI2015/SeaFile-3.1.3/ccnet --name=lzq8272587 --host=202.127.216.22 --port=10001

seaf-server-init -v -d /home/netlab/NSDI2015/SeaFile-3.1.3/seafile-data -p 12001 -P 8082

修改seahub下的setenv模板：

export CCNET_CONF_DIR=/home/netlab/NSDI2015/SeaFile-3.1.3/ccnet

export SEAFILE_CONF_DIR=/home/netlab/NSDI2015/SeaFile-3.1.3/seafile-data

export PYTHONPATH=/home/netlab/NSDI2015/SeaFile-3.1.3/seafile-server/seahub/thirdpart

保存，重命名，去掉尾部的template，然后运行run-seahub.sh.template

运行python manager.py syncdb

如果保存，检查是不是环境变量没有配置好，直接在终端里面输入上述三条指令配置即可。

进入seafile-server所在的目录，执行seafile-admin setup进行配置！

OK！

start， create admin：

天互数据

---