cdsClickHouse 数据同步

联合创作 · 2023-10-01 00:11

ClickHouse Data Synchromesh (cds) 是一个围绕 ClickHouse 的自动化数据同步组件，基于 go-zero。

ARCH

典型数据仓库架构的数据工作流

Design of Data Sync

自动将数据从 MySQL/MongoDB 数据源实时同步到 ClickHouse 集群（< 2min）。

start up

git clone https://github.com/zeromicro/cds.git
cd cds
make up

构建完成后，注意检查是否有容器异常退出。

点击 http://localhost:3414/cds.html 访问网页界面。

使用下面的用户名和密码登录：

user: admin@email.com
password: 123456

浏览 9

点赞

收藏

分享

举报

评论

图片

表情

cdsClickHouse 数据同步

ClickHouseDataSynchromesh(cds)是一个围绕 ClickHouse的自动化数据同步组件，基于 go-zero。ARCH典型数据仓库架构的数据工作流DesignofDataSy

redis-portRedis 数据同步

redis-port 是一个 Redis 工具，通过解析 rdb 文件，实现 Redis 主节点和从

rsync数据同步

rsync是类unix系统下的数据镜像备份工具，从软件的命名上就可以看出来了——remote syn

redis-portRedis 数据同步

redis-port是一个Redis工具，通过解析rdb文件，实现Redis主节点和从节点的数据同步。示例：$catdump.rdb|./redis-portdecode2>/dev/null

rsync数据同步

rsync是类unix系统下的数据镜像备份工具，从软件的命名上就可以看出来了——remotesync。它的特性如下：1、可以镜像保存整个目录树和文件系统。2、可以很容易做到保持原来文件的权限、时间、软

cwRsync数据同步工具

cwRsync是运用于windows 平台的数据同步机制，等于是Windows平台的 rsync 解

Porter数据同步中间件

概要Porter是一款数据同步中间件，主要用于解决同构/异构数据库之间的表级别数据同步问题。Porter始于2017年，提供数据同步功能，但并不仅仅局限于数据同步，在随行付内部广泛使用。主要提供一下功

pg_rewind数据同步工具

pg_rewind 是一个同步 PostgreSQL 数据目录的工具，其结果等同于用 rsync 同

canal数据同步方案设计

愿天堂没有BUG

实时数据同步系统

天清实时数据库同步系统，是一款可以在各种数据库之间实现数据准实时同步的产品，广泛适用于各种数据库之间的数据容灾热备、数据汇聚、数据分发、数据共享与交换等业务场景下，RDS产品采用解析数据库日志文件的技术原理来捕获增量数据。配合启明星辰的网闸、数据交换平台等产品部署时，可以实现跨网络边界的数据库数据采集和交互。

点赞

收藏

分享

举报