zoukankan      html  css  js  c++  java
  • 两台Sql server的数据同步

     

    Microsoft SQL Server 2000复制的概念:在数据库之间对数据和数据库对象进行复制和分发并进行同步以确保其一致性的一组技术。

      使用复制可以将数据分发到不同位置,通过局域网、使用拨号连接、通过 Internet 分发给远程或移动用户。复制还能够使用户提高应用程序性能,根据数据的使用方式物理分隔数据(例如,将联机事务处理 (OLTP) 和决策支持系统分开),或者跨越多个服务器分布数据库处理。

      SQL复制的基本元素包括:

      发布服务器、订阅服务器、分发服务器、发布、项目。

      发布服务器

      发布服务器是提供数据以便复制到其它服务器的服务器。发布服务器可以具有一个或多个发布,每个发布代表一组逻辑相关的数据。除了指定其中哪些数据需要复制之外,发布服务器还检测事务复制期间发生更改的数据并维护有关此站点上所有发布的信息。

      分发服务器

      分发服务器是作为分发数据库宿主并存储历史数据和/或事务以及元数据的服务器。分发服务器的角色根据执行的复制类型而不同。有关更多信息,请参见复制类型。

      远程分发服务器是独立于发布服务器并配置为复制的分发服务器的服务器。本地分发服务器是既配置为复制的发布服务器又配置为复制的分发服务器的服务器。

      订阅服务器

      订阅服务器是接收复制数据的服务器。订阅服务器订阅的是发布而不是发布中分离的项目;并且订阅服务器只订阅其需要的发布,而不是发布服务器上所有可用的发布。根据复制的类型和所选择的复制选项,订阅服务器还可以将数据更改传播回发布服务器或将数据重新发布到其它订阅服务器。

      发布

      发布是一个数据库中的一个或多个项目的集合。这种多个项目的分组使得指定逻辑相关的一组数据和数据库对象以一起复制变得更容易。

      项目

      项目是指定要复制的数据表、数据分区或数据库对象。项目可以是完整的表、某几列(使用垂直筛选)、某几行(使用水平筛选)、存储过程或视图定义、存储过程的执行、视图、索引视图或用户定义函数。

      订阅

      订阅是对数据或数据库对象的复本的请求。订阅定义将接收的发布和接收的时间、地点。订阅的同步或数据分发可以由发布服务器(强制订阅)或订阅服务器(请求订阅)请求。发布可以支持强制订阅和请求订阅的混合。

    复制的概念

    复制是将一组数据从一个数据源拷贝到多个数据源的技术,是将一份数据发布到多个存储站点上的有效方式。使用复制技术,用户可以将一份数据发布到多台服务 器上,从而使不同的服务器用户都可以在权限的许可的范围内共享这份数据。复制技术可以确保分布在不同地点的数据自动同步更新,从而保证数据的一致性。

    SQL复制的基本元素包括

    出版服务器、订阅服务器、分发服务器、出版物、文章

    SQL复制的工作原理

    SQL SERVER 主要采用出版物、订阅的方式来处理复制。源数据所在的服务器是出版服务器,负责发表数据。出版服务器把要发表的数据的所有改变情况的拷贝复制到分发服务 器,分发服务器包含有一个分发数据库,可接收数据的所有改变,并保存这些改变,再把这些改变分发给订阅服务器

    SQL SERVER复制技术类型

    SQL SERVER提供了三种复制技术,分别是:

    1、快照复制(呆会我们就使用这个)
    2、事务复制
    3、合并复制

    只要把上面这些概念弄清楚了那么对复制也就有了一定的理解。接下来我们就一步一步来实现复制的步骤。

    第一先来配置出版服务器

    (1)选中指定[服务器]节点
    (2)从[工具]下拉菜单的[复制]子菜单中选择[发布、订阅服务器和分发]命令
    (3)系统弹出一个对话框点[下一步]然后看着提示一直操作到完成。
    (4)当完成了出版服务器的设置以后系统会为该服务器的树形结构中添加一个复制监视器。同时也生成一个分发数据库(distribution)

    第二创建出版物

    (1)选中指定的服务器
    (2)从[工具]菜单的[复制]子菜单中选择[创建和管理发布]命令。此时系统会弹出一个对话框
    (3)选择要创建出版物的数据库,然后单击[创建发布]
    (4)在[创建发布向导]的提示对话框中单击[下一步]系统就会弹出一个对话框。对话框上的内容是复制的三个类型。我们现在选第一个也就是默认的快照发布(其他两个大家可以去看看帮助)
    (5)单击[下一步]系统要求指定可以订阅该发布的数据库服务器类型,SQLSERVER允许在不同的数据库如 ORACLE或ACCESS之间进行数据复制。但是在这里我们选择运行"SQL SERVER 2000"的数据库服务器
    (6)单击[下一步]系统就弹出一个定义文章的对话框也就是选择要出版的表
    (7)然后[下一步]直到操作完成。当完成出版物的创建后创建出版物的数据库也就变成了一个共享数据库。
    第三设计订阅

    (1)选中指定的订阅服务器
    (2)从[工具]下拉菜单中选择[复制]子菜单的[请求订阅]
    (3)按照单击[下一步]操作直到系统会提示检查SQL SERVER代理服务的运行状态,执行复制操作的前提条件是SQL SERVER代理服务必须已经启动。
    (4)单击[完成]。完成订阅操作。

    完成上面的步骤其实复制也就是成功了。但是如何来知道复制是否成功了呢?这里可以通过这种方法来快速看是否成功。展开出版服务器下面的复制——发布内容 ——右键发布内容——属性——击活——状态然后点立即运行代理程序接着点代理程序属性击活调度把调度设置为每一天发生,每一分钟,在0:00:00和 23:59:59之间。接下来就是判断复制是否成功了打开C:\Program Files\Microsoft SQL Server\MSSQL\REPLDATA\unc\XIAOWANGZI_database_database下面看是不是有一些以时间做为文件名的 文件夹差不多一分中就产生一个。要是你还不信的话就打开你的数据库看在订阅的服务器的指定订阅数据库下看是不是看到了你刚才所发布的表—

    /***************** 常见问题:权限问题  

    启动代理的域用户账号必须具有读取发布-分发服务器目录的权限
    你用的账号没有读取
    \\ServerA\D$\Program Files\Microsoft SQL Server\MSSQL\repldata\unc\这个目录下的文件的权限。


          启动代理的域用户账号必须具有读取发布-分发服务器目录的权限
    ----^^^^^^^^^^^^^^^在控制面板-->管理-->服务-->sqlagent-->属性里的那个启动用户

    -------------------------------------------------

    其中一个例子,准备工作:

    1.发布服务器,订阅服务器都创建一个同名的windows用户,并设置相同的密码,做为发布快照文件夹的有效访问用户
    我的电脑
    --控制面板
    --管理工具
    --计算机管理
    --用户和组
    --右键用户
    --新建用户
    --建立一个隶属于administrator组的登陆windows的用户

    2.在发布服务器上,新建一个共享目录,做为发布的快照文件的存放目录,操作:

    我的电脑--D:\ 新建一个目录,名为: PUB
    --右键这个新建的目录
    --属性--共享
    --选择"共享该文件夹"
    --通过"权限"按纽来设置具体的用户权限,保证第一步中创建的用户具有对该文件夹的所有权限
    --确定


    3.设置SQL代理(SQLSERVERAGENT)服务的启动用户(发布/订阅服务器均做此设置)

    开始--程序--管理工具--服务
    --右键SQLSERVERAGENT
    --属性--登陆--选择"此账户"
    --输入或者选择第一步中创建的windows登录用户名
    --"密码"中输入该用户的密码

    4.设置SQL Server身份验证模式,解决连接时的权限问题(发布/订阅服务器均做此设置)

    企业管理器
    --右键SQL实例--属性
    --安全性--身份验证
    --选择"SQL Server 和 Windows"
    --确定

    5.在发布服务器和订阅服务器上互相注册
    企业管理器
    --右键SQL Server组
    --新建SQL Server注册...
    --下一步--可用的服务器中,输入你要注册的远程服务器名--添加
    --下一步--连接使用,选择第二个"SQL Server身份验证"
    --下一步--输入用户名和密码
    --下一步--选择SQL Server组,也可以创建一个新组
    --下一步--完成

    6.对于只能用IP,不能用计算机名的,为其注册服务器别名
       (在连接端配置,比如,在订阅服务器上配置的话,服务器名称中输入的是发布服务器的IP)
    开始--程序--Microsoft SQL Server--客户端网络实用工具
    --别名--添加
    --网络库选择"tcp/ip"--服务器别名输入SQL服务器名
    --连接参数--服务器名称中输入SQL服务器ip地址
    --如果你修改了SQL的端口,取消选择"动态决定端口",并输入对应的端口号

    ---------------------------------------------------

    正式开始:

    1.配置发布服务器

    a. 选中指定 [服务器] 节点
    b. 从 [工具] 下拉菜单的 [复制] 子菜单中选择 [发布、订阅服务器和分发] 命令
    c. 系统弹出一个对话框点 [下一步] 然后看着提示操作
    --直到"指定快照文件夹"
    --在"快照文件夹"中输入准备工作中创建的目录: \\<服务器名>\pub
    一[下一步] 直操作到完成。
    d. 当完成了出版服务器的设置以后系统会为该服务器的树形结构中添加一个复制监视器
    同时也生成一个分发数据库(distribution)


    ---------------------------------------------------------------------------

    2.创建发布
    a. 选中指定的服务器
    b. 从 [工具] 菜单的 [复制] 子菜单中选择 [创建和管理发布] 命令。此时系统会弹出
    一个对话框
    c. 选择要创建发布的数据库,然后单击 [创建发布]
    d. 在 [创建发布向导] 的提示对话框中单击 [下一步] 系统就会弹出一个对话框。对话
    框上的内容是复制的三个类型。我们现在选第一个也就是默认的快照发布(其他两个
    大家可以去看看帮助)
    e. 单击 [下一步] 系统要求指定可以订阅该发布的数据库服务器类型,SQLSERVER允许在
    不同的数据库如 ORACLE或ACCESS之间进行数据复制。但是在这里我们选择运行
    "SQL SERVER 2000"的数据库服务器
    f. 单击 [下一步] ,选择要发布的对象(如表,视图,存储过程,一般是表)
    g. 然后 [下一步] 直到操作完成。当完成出版物的创建后创建出版物的数据库也就变成了
    一个共享数据库。


    ---------------------------------------------------------------------------

    3.设计订阅
    a. 选中指定的订阅服务器
    b. 从 [工具] 下拉菜单中选择 [复制] 子菜单的 [请求订阅]
    c. 按照提示单击 [下一步] 操作直到系统会提示检查SQL SERVER代理服务的运行状态,执行
    复制操作的前提条件是SQL SERVER代理服务必须已经启动。
    d. 单击 [完成] 完成订阅操作。


    ----------------------------------------------------------------------------

    完成上面的步骤其实复制也就是成功了。但是如何来知道复制是否成功了呢?
    这里可以通过这种方法来快速看是否成功。
    展开出版服务器下面的复制——发布内容——右键发布内容——属性——击活——状态然后点立即运行代理程序接着点代理程序属性击活调度
    把调度设置为每一天发生,每一分钟,在0:00:00和23:59:59之间。
    接下来就是判断复制是否成功了打
    开C:\Program Files\Microsoft SQL Server\MSSQL\REPLDATA\unc\XIAOWANGZI_database_database下面
    看是不是有一些以时间做为文件名的文件夹差不多一分中就产生一个。
    要是你还不信的话就打开你的数据库看在订阅的服务器的指定订阅数据库下看是不是看到了你刚才所发布的表。


    另一个手工同步的方案

    --定时同步服务器上的数据

    --例子:

    --测试环境,SQL Server2000,远程服务器名:xz,用户名为:sa,无密码,测试数据库:test

    --服务器上的表(查询分析器连接到服务器上创建)

    create table [user](id int primary key,number varchar(4),name varchar(10))
    go

    --以下在局域网(本机操作)

    --本机的表,state说明:null 表示新增记录,1 表示修改过的记录,0 表示无变化的记录

    if exists (select * from dbo.sysobjects where id = object_id(N'[user]') and OBJECTPROPERTY(id, N'IsUserTable') = 1)
    drop table [user]
    GO
    create table [user](id int identity(1,1),number varchar(4),name varchar(10),state bit)
    go

    --创建触发器,维护state字段的值

    create trigger t_state on [user]
    after update
    as
    update [user] set state=1
    from [user] a join inserted b on a.id=b.id
    where a.state is not null
    go

    --为了方便同步处理,创建链接服务器到要同步的服务器

    --这里的远程服务器名为:xz,用户名为:sa,无密码

    if exists(select 1 from master..sysservers where srvname='srv_lnk')
    exec sp_dropserver 'srv_lnk','droplogins'
    go
    exec sp_addlinkedserver 'srv_lnk','','SQLOLEDB','xz'
    exec sp_addlinkedsrvlogin 'srv_lnk','false',null,'sa'
    go

    --创建同步处理的存储过程

    if exists (select * from dbo.sysobjects where id = object_id(N'[dbo].[p_synchro]') and OBJECTPROPERTY(id, N'IsProcedure') = 1)
    drop procedure [dbo].[p_synchro]
    GO
    create proc p_synchro
    as
    --set XACT_ABORT on

    --启动远程服务器的MSDTC服务
    --exec master..xp_cmdshell 'isql /S"xz" /U"sa" /P"" /q"exec master..xp_cmdshell ''net start msdtc'',no_output"',no_output

    --启动本机的MSDTC服务

    --exec master..xp_cmdshell 'net start msdtc',no_output

    --进行分布事务处理,如果表用标识列做主键,用下面的方法

    --BEGIN DISTRIBUTED TRANSACTION
    --同步删除的数据

    delete from srv_lnk.test.dbo.[user]
    where id not in(select id from [user])

    --同步新增的数据

    insert into srv_lnk.test.dbo.[user]
    select id,number,name from [user] where state is null

    --同步修改的数据

    update srv_lnk.test.dbo.[user] set
    number=b.number,name=b.name
    from srv_lnk.test.dbo.[user] a
    join [user] b on a.id=b.id
    where b.state=1

    --同步后更新本机的标志

    update [user] set state=0 where isnull(state,1)=1
    --COMMIT TRAN
    go

    --创建作业,定时执行数据同步的存储过程

    if exists(SELECT 1 from msdb..sysjobs where name='数据处理')
    EXECUTE msdb.dbo.sp_delete_job @job_name='数据处理'
    exec msdb..sp_add_job @job_name='数据处理'

    --创建作业步骤

    declare @sql varchar(800),@dbname varchar(250)
    select @sql='exec p_synchro' --数据处理的命令
    ,@dbname=db_name() --执行数据处理的数据库名
    exec msdb..sp_add_jobstep @job_name='数据处理',
    @step_name = '数据同步',
    @subsystem = 'TSQL',
    @database_name=@dbname,
    @command = @sql,
    @retry_attempts = 5, --重试次数
    @retry_interval = 5 --重试间隔

    --创建调度

    EXEC msdb..sp_add_jobschedule @job_name = '数据处理',
    @name = '时间安排',
    @freq_type = 4, --每天
    @freq_interval = 1, --每天执行一次
    @active_start_time = 00000 --0点执行
    go
  • 相关阅读:
    自定义Python枚举
    解决Django跨域访问的问题
    BBS项目细节总结
    面向对象进阶
    面向对象
    三级菜单
    常用模块
    内置函数与匿名函数及递归
    迭代器和生成器
    函数
  • 原文地址:https://www.cnblogs.com/ymyglhb/p/1499337.html
Copyright © 2011-2022 走看看