老王76

客户要求实时同步表的数据到mysql，但这个表在tidb。 测试直接通过tidb cdc写入到mysql，有些字段是null，所以中间加了一个kafka实现 #### 客户...

应客户要求，需要同步数据到他们自己的数据库用于简单的数据分析，但这部分数据在postgresql，客户又不想再建pg，想直接同步到他们现有的mysql库，实时性倒是不要求。...

测试了多个方案同步，最终选择oceanu产品，底层基于Flink cdc 1、实时性能够保证，binlog量很大时也不产生延迟 2、配置SQL即可完成，操作上简单 下面示例...

所有业务都放在一个mongo实例，导致一个业务出问题，影响所有业务。于是进行拆分。 拆分通过在原来副本集添加节点，数据同步好之后，然后进行切换。 副本集名称以业务命名，为了...

### SQL如下 ``` SELECT DISTINCT a.id, a.num FROM a LEFT JOIN d ON a.id = d.stockId WHERE...

### 起引 订单表的扩展表，在配货转发货过程中会删除配货库数据后，插入到发货库。但一直有数据在没有转移的情况下也被删除。 ### 查找 通过解析binlog和审计，最终查...

## 方案说明 canal是阿里云开源的解析binlog组件，同步到ES需要deployer和adapter两部分： deployer解析MySQL binlog，ada...

### mysql引擎 create table t_mysql ( id Int32, name String, ) engine = MySQL('127....

#### 原始SQL（执行时间80s+） SELECT count(id) as id FROM task WHERE cid=100015 AND sid IN(1123...

![Uploading file...]() #### 原始SQL（平均执行时间2s+） SELECT DISTINCT sid FROM test WHERE cid =...

mysql表变更gh-osh相比pt-online-schema-change稳定，但使用过程也存在问题： 1. 导致自增重置 业务表id字段自增，同时会有delete，如...

mongo写入加了引号，导致一些数值字段都是string类型，修改字段类型为数值型。 db.Report99.find().forEach( function(doc){ ...