此工具支持MySQL和Oracle数据库的数据增量实时复制,可选择历史数据复制起点。支持TCP、UDP、KAFKA三种输出方式,输出JSON格式报文。每种输出方式均支持长连接和短连接,并支持断点续传。性能优异,MySQL使用binlog日志,Oracle使用Logminer,确保高时效性。支持高并发,可按库或按GROUP进行多线程数据复制和分发,处理能力强大。支持高可用部署,包括集群和Master-Slave部署,使用zookeeper进行控制,自动处理单点故障情况。轻量级独立部署,无第三方框架依赖,适用于各类数据库产品提供的API库。
数据增量实时复制工具 Flish2.0.1.zip
相关推荐
Oracle容灾备份策略批量同步与增量复制的实时数据迁移应用探索
Oracle容灾备份策略涉及批量同步和增量复制,用于实时备份和迁移数据。具体步骤包括:1. 初始阶段的批量数据同步,支持快照和直接读取数据文件;2. 增量数据的实时更新,支持裸设备、文件系统及OCFS;3. SGA压缩传输及datafile实例管理,有效保障数据备份与安全。
Oracle
1
2024-07-21
Oracle JMS 实时数据获取与数据库间实时复制模式
随着Oracle JMS的应用,用户可以实时获取Oracle数据,并通过数据库间的实时复制模式实现数据的同步和更新。
Oracle
2
2024-07-19
GoldenGate TDM软件的数据同步与实时复制
GoldenGate TDM(交易数据管理)软件是一种基于日志的结构化数据复制软件,通过解析源数据库在线日志或归档日志获取数据的增删改变化,并将这些变化应用到目标数据库,实现源数据库与目标数据库的同步和双活功能。GoldenGate TDM软件能够在异构的IT基础结构之间实现大量数据的亚秒级实时复制,支持几乎所有常用操作系统平台和数据库平台。
Oracle
3
2024-07-13
增量处理模式-数据挖掘工具(Weka 教程)
增量学习NaiveBayesUpdateable数据源 - ArffLoader评估 - ClassAssigner分类器 - NaiveBayesUpdateable评估 - IncrementalClassifierEvaluator可视化 - TextViewer可视化 - StripChart精度 - Accuracy均方根误差 - RMSE
数据挖掘
3
2024-05-20
MySQL并行复制架构实现实时数据同步策略
淘宝在MySQL实时数据并行复制架构的实践中,采用了高效的数据同步方案,确保数据实时性和稳定性。
MySQL
0
2024-08-27
增量数据挖掘探究
增量频繁模式挖掘在频繁项集挖掘基础上,探究了三种算法,对IUAMAR算法的缺陷进行了分析。结合实际数据,提出了销售数据挖掘的实现。
数据挖掘
7
2024-04-30
GoldenGate数据复制工具Replicat命令详解
GoldenGate数据复制工具中,Replicat命令(一)介绍了常用参数。tCHECKPARAMS用于检查参数语法并停止执行。tCOMMENT用于添加注释。tREPLICAT定义了Replicat进程的名称。在设置中,使用tUSERID指定连接目标数据库的用户名和密码,例如Userid为goldengate,密码为123456。tOBEY用于将外部文件包含到参数文件中。
Oracle
0
2024-09-27
Oracle数据库选择性复制技术应用:实时备份与数据迁移
Oracle选择性复制技术支持多种粒度的对象过滤,包括:
系统表 (Sys Schema)
Schema 复制
表复制
表级复制
组级复制 (多表复制)
用户级复制
表分区 (Table Partition)
临时表 (Temporary Table)
索引组织表 (IOT)
视图 (View)
序列 (Sequence)
索引 (Index)
存储过程 (Procedure)
函数 (Function)
包 (Package)
同义词 (Synonym)
触发器 (Trigger)
角色 (Role)
权限 (Privilege)
用户自定义类型 (UDT)
物化视图 (Materialized View)
选择性复制技术在Oracle容灾备份、实时备份和数据迁移等场景中具有广泛应用。
Oracle
3
2024-05-19
优化MySQL实时数据同步方案并行复制架构与实际应用
MySQL数据同步的现代挑战及其解决方案•深入探讨数据复制中心DRC的技术和应用•详解DRC的工作原理与核心指标•实时应用场景中的同构与异构复制案例•展望DRC未来的发展趋势
MySQL
2
2024-08-02