数据同步

canal 模拟 MySQL slave 节点, 通过 dump 命令实时获取 MySQL 增量数据, 并将其传输至 Kafka, 以支持流式数据分析.

kafka-connect-oracle-1.0.jar 是从https://github.com/erdemcer/kafka-connect-oracle打出来的包，专门干一件事——从Oracle数据库往Kafka里倒数据。用过Kafka Connect的朋友应该知道，官方的JDBC Connector对Oracle支持比较基础，这个就相当于是个专门补强的。部署也简单，丢到connectors目录，改下worker配置，直接就能跑。

DBSync数据同步工具助力实现不同类型数据库间的数据同步，目前已支持Access、SQL Server、Oracle、DB2、Sybase 11-15和MySQL数据库。借助软件提供的ODBC同步功能，可间接实现对FireBird、INTERBASE等数据库的支持。 该版本新增了对二进制字段同步的支持，未来版本将逐步扩展对更多数据库类型的支持。 DBSync还提供批量脚本更新功能，用户可根据界面定义的规范进行操作。该工具支持计划同步、增量同步和两表记录一致性维护等同步方式。 DBSync为开发人员提供二次开发接口，方便配置需要同步的数据。新增的快速事务处理功能可实现百万级数据记录的同步能力。

Linux 下的 DataX 数据同步脚本，蛮适合用来搞定两台能互通服务器之间的数据库表同步。文件名叫aaa.json，配置简单明了，调试起来也方便，不用太折腾。 DataX是阿里开源的离线数据同步工具，支持多种数据源对接，MySQL、Oracle、PostgreSQL 你都能用上。这个脚本的思路也比较清晰，就是把源库和目标库的连接信息写好，再列出要同步的表就行。 用过你就知道，它适合那种“我不想写代码，但又想批量搬数据”的场景。比如你在搞数据库迁移，或者多个环境要保持表数据一致，就合适。配置项里像jdbcUrl、username、password这些都常见，DataX 自己传输逻辑，嗯……挺

利用MySQL内置的数据同步机制，可以轻松实现数据库的单向复制和主从同步。如果需要双向同步，可先从A向B配置单向同步，再反向配置一次。

在当前的业务环境中，确保数据同步设置是关键一环。通过有效的配置，可以实现数据的高效同步，提升企业运作效率和数据管理质量。

适用于SQL Server、MySQL和Oracle的数据库同步软件。

轻量数据库的高性能选手就是它了。SQL Anywhere的跨平台兼容、移动端友好和部署简单，真的挺适合搞移动数据同步的场景。尤其是你需要在销售端、设备上也能离线用数据库，嗯，它就挺合适的。支持Windows、Linux、各种移动系统，兼容性这块不用担心。像什么销售 App、IoT 设备、嵌入式硬件——基本都能用它撑起来，数据来回同步也顺畅。数据同步功能做得蛮扎实，配合 Replication Server 和 Synchronization Manager，可以玩点花活，比如双向同步、定制化策略。用起来灵活，配置也不麻烦，适合不想折腾太多的你。图形化的操作界面对新手蛮友好，配置数据库不用天天敲

异构数据中心的同步架构，说白了就是多个地方的数据怎么保持一致、不中断。应用同步、日志同步、存储同步这三种方式，各有用武之地，配合得好，整个系统抗压能力就蹭蹭上涨。尤其是像腾讯社交网络那种量级，没两把刷子根本扛不住流量。 应用同步的玩法，适合那些实时性要求比较高的业务。比如社交平台，一条朋友圈发出去了，不能深圳看得见、上海还在等缓存刷新吧？腾讯搞了个“应用同步中心”，前面接个消息队列，后面三个数据中心同步更新，嗯，效率高、扩展也灵活。 日志同步更偏向后端支撑，像运维、监控这些场景最常用。系统出点小问题，通过日志马上能排查。而且你要知道，腾讯这种体量，一天能飙出多少日志？他们上的是分布式日志系统，

OracleStream已成功实现多源复制，即两个Stream节点将数据同步至一个Stram节点。按照详细的操作笔记逐步实现多源复制，重点在于确保SCN同步的精确性。