{ "componentChunkName": "component---src-templates-issues-tsx", "path": "/issues/64", "result": {"data":{"issuesJson":{"id":"9e4dbfa9-6899-517a-8bc9-f459cba4f649","title":"alibaba/canal: 阿里巴巴 MySQL binlog 增量订阅&消费组件","number":64,"bodyHTML":"
\n



\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n
Reposalibaba/canal
Views\"views\"
Stars\"stars\"
Forks\"forks\"
License\"license\"
UpdatedAt\"last-commit\"
CreatedAt\"create-at\"
\n\n

\"\"

\n\n
\n

\"build
\n\"codecov\"
\n\"maven\"
\n\"license\"
\n\"average
\n\"percentage
\n\"Leaderboard\"

\n

简介

\n

\"\"

\n

canal [kə'næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费

\n

早期阿里巴巴因为杭州和美国双机房部署，存在跨机房同步的业务需求，实现方式主要是基于业务 trigger 获取增量变更。从 2010 年开始，业务逐步尝试数据库日志解析获取增量变更进行同步，由此衍生出了大量的数据库增量订阅和消费业务。

\n

基于日志增量订阅和消费的业务包括

\n\n

当前的 canal 支持源端 MySQL 版本包括 5.1.x , 5.5.x , 5.6.x , 5.7.x , 8.0.x

\n

工作原理

\n

MySQL主备复制原理

\n

\"\"

\n\n

canal 工作原理

\n\n

重要版本更新说明

\n
    \n
  1. canal 1.1.x 版本（release_note）,性能与功能层面有较大的突破,重要提升包括:
    2. \n
\n\n
    \n
  1. canal 1.1.4版本，迎来最重要的WebUI能力，引入canal-admin工程，支持面向WebUI的canal动态管理能力，支持配置、任务、日志等在线白屏运维能力，具体文档：Canal Admin Guide
    2. \n
\n

文档

\n\n

多语言

\n

canal 特别设计了 client-server 模式，交互协议使用 protobuf 3.0 , client 端可采用不同语言实现不同的消费逻辑，欢迎大家提交 pull request

\n\n

canal 作为 MySQL binlog 增量获取和解析工具，可将变更记录投递到 MQ 系统中，比如 Kafka/RocketMQ，可以借助于 MQ 的多语言能力

\n\n

基于canal开发的工具

\n\n

相关开源&产品

\n\n

问题反馈

\n\n

本项目的Issues会被同步沉淀至阿里云开发者社区

","updatedAt":"2025-05-21T15:51:07Z","upvoteCount":null,"author":{"login":"eryajf","avatarUrl":"https://avatars.githubusercontent.com/u/33259379?u=e4a4090a38ac2473aaed4ef9945233636776c6c3&v=4","url":"https://github.com/eryajf"},"category":null,"labels":{"edges":[{"node":{"name":"更多","color":"25B472"}},{"node":{"name":"数据管道","color":"fa3097"}},{"node":{"name":"alibaba","color":"1d8651"}}]},"comments":{"edges":[]}}},"pageContext":{"number":64,"previous":{"title":"caddyserver/caddy: Caddy是一款基于Go语言编写的强大且可扩展的平台，可以给你的站点、服务和应用程序提供服务。","number":63},"next":{"title":"capistrano/capistrano: 一个利用 Ruby、Rake 和 SSH 构建的部署自动化工具。","number":65}}}, "staticQueryHashes": ["151096407","2861350382"]}