公司新开源了两个 golang 项目，欢迎各种 issue/PR（求关注）

This topic created in 2738 days ago, the information mentioned may be changed or developed.

项目简介

https://mp.weixin.qq.com/s/h0rW-HMGUeSMpdRkaYEZxg

repo

DM: https://github.com/pingcap/dm
Lightning: https://github.com/pingcap/tidb-lightning

1 replies • 2019-01-21 19:51:36 +08:00

c4pt0r

Jan 21, 2019

Awesome.
说明一下，dm 和 lightning 都是用来改善 mysql 用户迁移到 tidb 的成本的。
1. lightning 是一个高速的离线导入数据的工具，支持的格式是 mydumper 的备份格式，当你在导入超过 1T 以上的大数据量的表库的时候，使用 lightning 会比使用原生 mydumper + myloader 带来 5x - 10x 的性能提升。
2. dm 是一整套完整平台，用于做灰度数据迁移，将导出 -> 导入 -> 同步，这几个串联起来，打包到一个工具里面，做到一件的数据迁移和同步。