1、首先方案采用mydumper迁移+myloder导入,
(1)、myloder导入会报transaction too large。
(2)、mydumper备份的时候tidb-server所在服务器内存会不断增长,导致tidb-server被oom killer,可以通过升级mydumper到最新版本,升级tidb版本到2.1.15解决(目前最高版本3.0)。
2、尝试使用mydumper迁移+TIDB官方loader导入,由于单表太大会导致loader导入异常慢,导入过程数据导入量成0.11 0.12 小数点后两位增长,
问题分析是由于单表数据量太大,导致loader导入成单线程模式。
3、尝试mydumper导出+TIDB官方TIDB-LIGHTING导入, 会遇到如下问题:
(1)、invailiad time format 1970。
问题解决:
修改tidb-lighting配置文件,加下sql-mode=""