当前位置:首页 > 站长资讯 > 正文内容

CloudC *** v5.3.0.0 发布,无惧海量表的数据实时迁移同步

a811625533个月前 (11-28)站长资讯4

cloudc *** 免费社区版 是由 clougence 公司自主研发的一款可视化自动化的数据迁移与同步工具,集成了 结构迁移数据迁移实时同步数据校验数据订正 等核心能力。产品全面支持 60+ 主流数据库及中间件,涵盖关系型数据库、实时数仓、消息队列、缓存系统和搜索引擎,其中包括国产主流系统如 oceanbasepolardbtidbstarrocksdoris 以及 rocketmq 等。

通过集成开源项目 CloudC *** Process,用户可轻松实现以下扩展功能:

  • wide-table:宽表处理插件,支持事实表与单维度表的自动组合构建
  • data-transform:通用数据转换插件,支持字段增减、操作类型变更、数据清洗与回填
  • data-gather:分库分表、跨地域或垂直拆分场景下的数据实时汇聚
  • data-compare:基于源端变化实现业务级数据对账
  • business-alert:根据数据波动趋势触发智能告警机制

CloudC *** 在功能上对标阿里云 DTS、Amazon DMS、StreamSets 和 AIrByte,致力于帮助开发人员、DBA 及运维团队高效搭建稳定可靠的数据链路。

HARPA ai

浏览器插件,chatgpt自动化助手,将Chatgpt集成到谷歌搜索

下载

核心亮点

  • 支持 MySQL 到 MySQL/StarRocks/Doris/SelectDB/PostgreSQL 的表达式表名匹配,适用于超大规模表的批量迁移与同步
  • 新增 CloudC *** 控制台黑夜模式,提升夜间操作体验

新增链路支持

  • 开通 腾讯云 TDSQL MySQL → TDSQL MySQL 的全量同步、增量同步、数据校验、数据订正、结构迁移及 DDL 同步(包括加列、删列、modify、rename、truncate)

新功能上线

  • 支持 AWS RDS oracle 的全量迁移与增量同步
  • Oracle/PostgreSQL/SQL Server 源端支持配置数据校验采样率(参数:checkSamplePercent),支持叠加过滤条件,暂不支持断点续传
  • 实现 MySQL → PostgreSQL 多 Schema 场景下的迁移与同步
  • TiDB 源端支持多个任务订阅同一张表,显著降低超大 Region 表拉取变更时出错的概率
  • 支持 MySQL/OceanBase for MySQL → OceanBase for MySQL 的 CHANGE COLUMN 类型 DDL 同步
  • 支持 MySQL → MySQL 场景下地理空间类型数据的同步
  • 支持在任务级别设置延迟告警 WebHook,便于对关键任务进行独立监控
  • 钉钉、飞书、企业微信告警支持 "@所有人" 功能,可通过 配置 > 个人偏好 > CloudC *** > imAlertAtAll 参数开启
  • 语音告警支持通过 *** 发送,满足全内网环境用户的使用需求
  • 支持将迁移同步节点上的任务日志和主机日志上传至 S3 或 OSS(通过 配置 > 个人偏好 设置存储信息),助力故障排查
  • 支持将任务参数导出为 Excel 文件保存,便于审计与问题追踪
  • 支持导出全量性能、增量性能及机器监控图表为图片
  • 支持修改订阅批量操作中黑名单的生效范围(已订阅表 / 新增表)
  • 支持将现有任务参数保存为模板,并在应用模板时预览内容
  • 提供开放 API 接口(/schema/listTransObjsBymeta),支持按源端和目标端库表信息查询相关任务

体验优化

  • 优化任务处于“删除中”状态时的操作限制,避免误操作
  • 优化任务参数模板的创建、查询与删除流程
  • 完善模板配置项的白名单规则管理
  • 改进创建任务时选择目标表的交互逻辑,提升易用性

缺陷修复

  • 修复 TiDB 源端增量同步时无符号 Decimal 类型解析异常的问题
  • 修复任务参数页面未展示待创建参数的问题
  • 修复未激活状态下提示文案错误的问题
  • 修复在搜索并手动勾选模式下修改映射规则或表名接口调用异常的问题
  • 修复消息源端创建任务最后一步界面显示异常的问题
  • 修复消息源端任务黑名单操作按钮未隐藏的问题
  • 修复消息对端数据库列表 action 过滤按钮未隐藏的问题
  • 修复 Kafka 测试连接时无法获取 Topic 列表的问题
  • 修复设置自定义主键后虚拟影响汇聚逻辑主键生成的问题
  • 修复个人偏好中 IM 验证签名无效的问题
  • 修复修改邮箱、手机号、密码时报错信息未正确显示的问题
  • 修复异步操作(如创建、重跑、删除任务)失败后仍允许启动任务,导致状态机紊乱的问题
  • 修复创建任务时无法选择表的原因未正常提示的问题
  • 修复开启条件过滤下推后,“下一步/上一步”按钮状态缺失的问题
  • 修复 MySQL 获取最新位点后确定按钮不可点击的问题
  • 修复创建任务指定虚拟列时,若对端存在同名列会导致增量写入为空的问题
  • 修复达梦数据库因 DDL(ADD LOGIC LOG)解析错误引发结构快照异常的问题
  • 修复达梦源端数据过滤配置不生效的问题
  • 修复手动添加阿里云数据源时缺少实例 ID,导致自动建库、IP 白名单等依赖 OpenAPI 的功能失败的问题
  • 修复存量任务查看库表映射时,操作黑名单显示异常的问题
  • 修复超长单行日志导致浏览器卡死或崩溃的问题
  • 修复 MQ/Elasticsearch 对端修改订阅时新增库“确定”按钮无法点击的问题

免费下载与使用

  • 快速体验 SaaS 全托管服务:https://www.php.cn/link/9d43928b9e007bf34b0d8eadb3D0393f

源码地址:点击下载

扫描二维码推送至手机访问。

版权声明:本文由2345好导航站长资讯发布,如需转载请注明出处。

本文链接:http://www.2345hao.cn/blog/index.php/post/36264.html

分享给朋友:

“CloudC *** v5.3.0.0 发布,无惧海量表的数据实时迁移同步” 的相关文章

手握采购、研发、销售三条“命脉” 谁是操控创耀科技命运的神秘“公司A”

手握采购、研发、销售三条“命脉” 谁是操控创耀科技命运的神秘“公司A”

  1947年,美国贝尔实验室的威廉.肖克利和他的两位助手布拉顿、巴丁,研制出了世界上第一只晶体管,为集成电路产业打开时代大门,也造就了现代信息社会的根基――“芯片”。   但是现代信息社会并不能避不开国与国之间的问题。   “芯片强则产业强,芯片兴则经济兴,没有高端芯片就没有真正的产业安全和国...

19%市占率换不来业绩体量的和林微纳 新业务0.24%市占率又该如何期待?

19%市占率换不来业绩体量的和林微纳 新业务0.24%市占率又该如何期待?

  以19%市占率位居精微屏蔽罩市场头部玩家的和林微纳,即将亮相科创板。   2021年3月9日,主要产品为微机电(MEMS)精微电子零部件的和林微纳,开启了科创板招股。公司与楼氏电子、瑞声科技、裕元电子和银河机械,一同成为精微屏蔽罩市场的主要玩家,2019年五家企业合计占到全球市场总份额的80%...

上声电子:四年净利仅剩30% 研发低产能又“空置” 三角股权难解丨

上声电子:四年净利仅剩30% 研发低产能又“空置” 三角股权难解丨

  历时四年发展,归母净利润反缩水近7成的上声电子,即将登陆科创板,寻求资本助力。   作为国内前装市场汽车声学产品方案供应商的上声电子,于2021年3月29日在科创板启动招股环节。公司计划募集4.47亿元资金,其中2.47亿元用于扩产扬声器项目,1.49亿元用于扩产汽车电子项目,剩余5000万元...

华恒生物:近半市占率的细分龙头 竟然只能“被动挨打”丨

华恒生物:近半市占率的细分龙头 竟然只能“被动挨打”丨

  全球最大的丙氨酸生产商华恒生物,即将亮相科创资本市场。   2021年4月7日,以合成生物技术为核心,主要从事氨基酸及其衍生物产品研发、生产、销售的华恒生物,于科创板开启了路演询价环节,距离正式亮相科创板仅剩一步之遥。      图/Wind   目前,华恒生物拥有接近50%的市场占有率...

四个交易日大跌24%、16.6亿资金疯狂逃离 真爱美家股价过山车的背后丨

四个交易日大跌24%、16.6亿资金疯狂逃离 真爱美家股价过山车的背后丨

  四个交易日高位逆势大跌24%,共计16.6亿资金逃离,上市仅10多天的真爱美家(003041.SZ)正经历大资金高位套现离场。   资料显示,真爱美家是一家以毛毯出口为主的家用纺织企业,公司于2021年4月6日正式登陆资本市场。4月15日,公司涨停封板态势突然崩溃,股价掉头向下,当天最大跌幅触...

从占比90%跌至30% 传统主业断崖式下跌背后 力源科技自己都有些迷茫丨

从占比90%跌至30% 传统主业断崖式下跌背后 力源科技自己都有些迷茫丨

  号称火电、核电行业凝结水精处理系统设备供应商最具竞争力之一的力源科技,即将登陆科创资本市场。         图/Wind   力源科技是一家主要为核电、火电、冶金、化工、石化等行业公司提供各类环保水处理系统和智能电站设备服务的企业。2021年4月21日,公司在科创板启动了招股环节,拟...