canal

2热度

6回答

[alibaba/canal]adapter增量同步mysql至es，启动成功，但数据没有增量同步

canal版本1.1.4 example.yml配置 canal.adapter日志 mysql配置 es已经启动成功，mysql也已经启动并新增了数据，但没有打印日志，es无增量数据

1热度

5回答

[alibaba/canal]canal-1.1.5 更改数据不能同步到 es 7

环境：macos、mysql 8、elasticsearch 7.17.1 canal 配置按教程：https://blog.csdn.net/qq_41028058/article/details/117994183 使用 curl -X POST http://localhost:8081/etl/es7/student.yml 可以全量数据同步。更改数据时，adapter.log 日志可

0热度

3回答

[alibaba/canal]YamlUtils工具类 ymlToObj函数 Properties baseProperties参数问题

environment canal 1.1.7 mysql 5.7.34 Issue Description com.alibaba.otter.canal.client.adapter.support 包下YamlUtils工具类ymlToObj java 基本数据类型作为参数传递时，传递的是值的拷贝，无论怎么改变这个拷贝，原值是不会改变的，引用对象参数传递时，传递的是指向真实对象的地址

10热度

4回答

[alibaba/canal]如何保证全量同步和增量同步的一致性?

比如我要同步一个mysql数据库，里面有很多表，每个表又有很多记录，每个表的数据还在实时变化。那么如何能够正确全量同步和增量同步呢？因为在同步全量的时候，数据还在不停的变化，这样会导致增量同步的时候，某些新记录已经在全量同步的时候同步过去了，增量同步的时候又同步了一遍，会导致数据重复或者冗余（如果该记录没有主键或者唯一值等），如何解决这个问题，谢谢！

3热度

5回答

[alibaba/canal]canal运行期间, 我update了一个有20w数据的表,导致canal数据同步延迟20小时

Question canal运行期间, 我update了一个有20w数据的表,导致canal数据同步延迟20小时同步逻辑是: mysql --> canal --> es, 起因: canal 在运行期间, 我修改了一个20w数据的表其中2w条数据的单个属性; 问题: update完数据后我针对此表做了一个全量同步数据到es, 然而并没有用, canal日志查看到数据还在缓慢的up

3热度

3回答

[alibaba/canal]canal-deployer-1.1.6 监听 RDS binlog，配置发送至阿里云 RocketMq，出现主题分区数组越界bug,请指教

Question canal-deployer-1.1.6 监听 RDS binlog，配置发送至阿里云 RocketMq，出现主题分区数组越界bug,请指教； 2023-11-30 19:18:15.913 [pool-4-thread-1] ERROR c.a.o.c.c.rocketmq.producer.CanalRocketMQProducer - java.util.concurr