欢迎来到天天文库
浏览记录
ID:33056604
大小:105.26 KB
页数:4页
时间:2019-02-19
《关于beedi与sqlserver事务复制的对比》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、BeeDI日志解析同步与SQLServer事务复制的对比、工作原理1.BeeDI日志解析同步的工作机制卜•图显示了口志解析同步的组件关系。Fl志解析同步由H志解析模块、过滤转换模块和数据加载模块组成。日志解析模块从指定的解析点(源库日志中事务发生时间)开始,按照提交顺序依次解析日志文件中各个事务包含的DML记录,同时向前移动解析点,并将记录封装为BeeDI内部格式数据,过滤转换模块根据预设的规则对解析后的数据进行过滤,排除不需同步的数据,对数据进行转换,满足标准化需要。数据加载模块将最终需要同步的数据翻译为目标数据库可接受的DML,按照预设的事务缓冲区
2、大小执行提交DML,同时通知日志解析模块记录解析时间点,用于下次日志解析的起点。每个日志解析模块可以对应多个过滤转换模块,每个过滤转换模块可以对应多个数据加载模块,由此单个增量数据流可以根据过滤条件向多个目标同步。对于双向数据同步,只需反向设置从目标库解析日志,并将解析后的数据加载到源库。解析模块支持忽略某一指定用户产生的事务,由此可以避免双向同步时增量数据的反复同步。2.SQLServer事务复制的工作机制事务复制由SQLServer快照代理、日志读取器代理和分发代理实现。快照代理准备快照文件(其屮包含了已发布表和数据库对象的架构和数据),然后将这些
3、文件存储在快照文件夹中,并在分发服务器中的分发数据库中记录同步作业。Fl志读取器代理监视为事务复制配置的每个数据库的事务Fl志,并将标记为耍复制的事务从事务日志复制到分发数据库中。分发代理将快照文件夹中的初始快照文件和分发数据库表中的事务复制到订阅服务器屮。下图显示了事务复制的主耍组件。新的事口立:*C直用押仔务复制订阅服务器中必须包含一些表,这些表需要与发布服务器屮的表具有相同的架构和数据,这样才能从发布服务器中接收增量更改。二、技术参数对比序号技术参数BeeDIB志解析同步SQLServer事务复制1复制表结构要求支持同构或异构表同步,同步表不要求
4、必须包含主键结构一致凡包含主键2复制数据的清洗转换过滤转换模块可对解析数据进行过滤,支持多种转换操作,如类型转换、字段运算、参照转换、字符串处理、字符集转换、空值处理、日期转换、聚集运算、既定取值、字段切分、字段合并创建发布模块时,通过筛选器过滤复制数据,不支持对数据进行转换3双向复制直接解析目标库日志,将增量变化同步到源库需要在订阅服务器创建触发器4复制过程表结构改变配置源表和n标表数据映射关系,从断点处继续同步重新设置发布订阅,初始化快照数据5复制点移动任意指定从某一时间点开始挖掘增量数据不支持6事务审计记录每一事务的执行用户、执行时间、inser
5、t>delete和update记录数不支持7部署方式集中部署,无需在主从库安装或开启任何插件需要主库开启发布模块,从库开启订阅模块
此文档下载收益归作者所有