CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步


cloudcanal 免费社区版 是由 clougence 公司自主研发的一款可视化自动化的数据迁移与同步工具,集成了 结构迁移数据迁移实时同步数据校验数据订正 等核心能力。产品全面支持 60+ 主流数据库及中间件,涵盖关系型数据库、实时数仓、消息队列、缓存系统和搜索引擎,其中包括国产主流系统如 oceanbasepolardbtidbstarrocksdoris 以及 rocketmq 等。

通过集成开源项目 CloudCanalProcess,用户可轻松实现以下扩展功能:

  • wide-table:宽表处理插件,支持事实表与单维度表的自动组合构建
  • data-transform:通用数据转换插件,支持字段增减、操作类型变更、数据清洗与回填
  • data-gather:分库分表、跨地域或垂直拆分场景下的数据实时汇聚
  • data-compare:基于源端变化实现业务级数据对账
  • business-alert:根据数据波动趋势触发智能告警机制

CloudCanal 在功能上对标阿里云 DTS、Amazon DMS、StreamSets 和 AirByte,致力于帮助开发人员、DBA 及运维团队高效搭建稳定可靠的数据链路。

CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步

独响 独响

一个轻笔记+角色扮演的app

独响 249 查看详情 独响

核心亮点

  • 支持 MySQL 到 MySQL/StarRocks/Doris/SelectDB/PostgreSQL 的表达式表名匹配,适用于超大规模表的批量迁移与同步
  • 新增 CloudCanal 控制台黑夜模式,提升夜间操作体验

新增链路支持

  • 开通 腾讯云 TDSQL MySQL → TDSQL MySQL 的全量同步、增量同步、数据校验、数据订正、结构迁移及 DDL 同步(包括加列、删列、modify、rename、truncate)

新功能上线

  • 支持 AWS RDS Oracle 的全量迁移与增量同步
  • Oracle/PostgreSQL/SQL Server 源端支持配置数据校验采样率(参数:checkSamplePercent),支持叠加过滤条件,暂不支持断点续传
  • 实现 MySQL → PostgreSQL 多 Schema 场景下的迁移与同步
  • TiDB 源端支持多个任务订阅同一张表,显著降低超大 Region 表拉取变更时出错的概率
  • 支持 MySQL/OceanBase for MySQL → OceanBase for MySQL 的 CHANGE COLUMN 类型 DDL 同步
  • 支持 MySQL → MySQL 场景下地理空间类型数据的同步
  • 支持在任务级别设置延迟告警 WebHook,便于对关键任务进行独立监控
  • 钉钉、飞书、企业微信告警支持 "@所有人" 功能,可通过 配置 > 个人偏好 > CloudCanal > imAlertAtAll 参数开启
  • 语音告警支持通过代理发送,满足全内网环境用户的使用需求
  • 支持将迁移同步节点上的任务日志和主机日志上传至 S3 或 OSS(通过 配置 > 个人偏好 设置存储信息),助力故障排查
  • 支持将任务参数导出为 Excel 文件保存,便于审计与问题追踪
  • 支持导出全量性能、增量性能及机器监控图表为图片
  • 支持修改订阅批量操作中黑名单的生效范围(已订阅表 / 新增表)
  • 支持将现有任务参数保存为模板,并在应用模板时预览内容
  • 提供开放 API 接口(/schema/listTransObjsByMeta),支持按源端和目标端库表信息查询相关任务

体验优化

  • 优化任务处于“删除中”状态时的操作限制,避免误操作
  • 优化任务参数模板的创建、查询与删除流程
  • 完善模板配置项的白名单规则管理
  • 改进创建任务时选择目标表的交互逻辑,提升易用性

缺陷修复

  • 修复 TiDB 源端增量同步时无符号 Decimal 类型解析异常的问题
  • 修复任务参数页面未展示待创建参数的问题
  • 修复未激活状态下提示文案错误的问题
  • 修复在搜索并手动勾选模式下修改映射规则或表名接口调用异常的问题
  • 修复消息源端创建任务最后一步界面显示异常的问题
  • 修复消息源端任务黑名单操作按钮未隐藏的问题
  • 修复消息对端数据库列表 action 过滤按钮未隐藏的问题
  • 修复 Kafka 测试连接时无法获取 Topic 列表的问题
  • 修复设置自定义主键后虚拟列影响汇聚逻辑主键生成的问题
  • 修复个人偏好中 IM 验证签名无效的问题
  • 修复修改邮箱、手机号、密码时报错信息未正确显示的问题
  • 修复异步操作(如创建、重跑、删除任务)失败后仍允许启动任务,导致状态机紊乱的问题
  • 修复创建任务时无法选择表的原因未正常提示的问题
  • 修复开启条件过滤下推后,“下一步/上一步”按钮状态缺失的问题
  • 修复 MySQL 获取最新位点后确定按钮不可点击的问题
  • 修复创建任务指定虚拟列时,若对端存在同名列会导致增量写入为空的问题
  • 修复达梦数据库因 DDL(ADD LOGIC LOG)解析错误引发结构快照异常的问题
  • 修复达梦源端数据过滤配置不生效的问题
  • 修复手动添加阿里云数据源时缺少实例 ID,导致自动建库、IP 白名单等依赖 OpenAPI 的功能失败的问题
  • 修复存量任务查看库表映射时,操作黑名单显示异常的问题
  • 修复超长单行日志导致浏览器卡死或崩溃的问题
  • 修复 MQ/Elasticsearch 对端修改订阅时新增库“确定”按钮无法点击的问题

免费下载与使用

  • 快速体验 SaaS 全托管服务:https://www.php.cn/link/9d43928b9e007bf34b0d8eadb3d0393f

源码地址:点击下载

以上就是CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步的详细内容,更多请关注其它相关文章!


# 池州品牌推广营销公司  # 多个  # 是由  # 适用于  # 并在  # 相关文章  # 中文网  # 库尔勒微商城网站建设  # 榆林seo营销软件  # 主键  # 吉林seo推广招商加盟  # 楼盘外拓营销推广方案  # 崇左营销推广网络营销公司  # 四川网站首页推广  # 湛江seo公司联系21火星  # 海口做搜狗seo  # 网站首页优化怎么做  # mysql  # 链路  # 无惧  # 钉钉  # stream  # 飞书  # ai  # 阿里云  # 腾讯  # 工具  # 企业微信  # 浏览器  # 微信  # js  # excel  # oracle 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 机器人加速!稀土永磁也被带火,持续性如何?  MiracleVision视觉大模型上线时间  【澎湃原动力】人工智能产业协同创新中心:全产业链资源在这里汇聚  高通发布长期产品计划,为工业和企业物联网产品提供全新组合方案  马斯克的幽默“现实”:AR眼镜与20美元“增强现实”哪个真实?  “智能体动作生成技术”现身WAIC:游戏AI技术为机器人科创注入新动力  清华&中国气象局大模型登Nature:解决世界级难题,「鬼天气」预报时效首次达3小时  人工智能在重症监护室的未来  人工智能助力林草行业高质量发展  RoboNeo操作教程  英国前首相:AI可能被用来制造“生物恐怖武器”  Bing 聊天机器人现支持在桌面端用语音提问  研究表明 GPT-4 模型具备自我纠错能力,有望推动 AI 代码进一步商业化  Hugging Face发布了基于NASA卫星数据构建的AI地理空间基础模型  小米首次曝光 64 亿参数的 MiLM-6B AI 大模型,或将应用于小爱同学  原小米 9 号员工李明打造全球首款 AI 安卓桌面机器人  华为将于 7 月发布面向 AI 大模型的新款存储产品  亚太地区 70% 的企业高管正探索生成式 AI 应用或已经进行投资  机构研选 | 虚拟电厂是电力物联网升级版 智能电网望迎来高速发展  大模型的“黄金搭档”来了!腾讯云正式发布AI原生向量数据库,提供10亿级向量检索能力  视觉中国推出AI灵感绘图功能,付费后可在“合法合规前提下使用”  创新科学家成功研发FAST激光靶标维护机器人  生成式人工智能进入产业应用!但再“聪明”仍是工具,最终目的是服务于人  明略科技发布免费开源TensorBoard.cpp,促进大型模型的预训练工作  遵义市首次引入手术机器人,成功实施全膝关节置换术  下一个前沿:量子机器学习和人工智能的未来  标贝科技亮相国际顶会ICASSP2025 加速布局海外AI数据市场  管提需求,大模型解决问题:图表处理神器SheetCopilot上线  pixivFANBOX 更新运营规则,禁止通过外链绕开 AI 生成禁令  GPT-4不能在麻省理工学院获得计算机科学学位  腾讯机器狗进化:通过深度学习掌握自主决策能力  探展WAIC | 第四范式“式说”聚焦toB大模型,布局生成式AI重构企业软件  无人机自主巡检为高海拔输电线路运维添“新彩”  人工智能时代的科幻译者怎么办?“做好翻译工作的高端10%”|文化观察  航拍无人机怎么选?大疆无人机盘点推荐  人工智能快速发展 打开就业新空间  人工智能驱动艺术,打开达利的超现实想象  这款在《自然通讯》发表的机器人,为变形金刚来到现实创造可能性  如布AI口袋学习机S12 将亮相综艺节目《好样的!国货》  以计算机视觉技术为基础的库存管理如何改革零售行业  微软和谷歌面临的人工智能困境:需要投入大量资金才能获得盈利  扎克·施奈德新片《月球叛军》曝剧照 机器人首度现身  微软 Copilot 团队主管呼吁用户与 AI 交流时应使用恰当的礼貌用语  套娃不可取:研究人员证实用AI生成的结果训练AI将导致模型退化  酒店业将如何受益于人工智能的改变?  「从未被制造出的最重要机器」,艾伦·图灵及图灵机那些事  OpenAI首席执行官表态支持欧盟AI监管  特斯拉 Optimus 人形机器人入驻北美门店,帮助提升汽车销量  生成式AI对云运维的3大挑战  丰田汽车研究院推出生成式人工智能汽车设计工具 

 2025-11-28

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.