淘宝海量数据快速迁移实践

数据迁移的场景,目标是什么

场景:
表太“大”
业务架构调整,数据需要重新分布
场景是什么
enq: HW - contention
enq: TX - row lock contention
enq: TX - index contention
需求:
表需要从1个库迁移到另外的库中
迁移对应关系可能是1->1, 1->N, N->1,N->M
源,目标端环境可能是:Oracle <-> oracle,Oracle <-
> mysql,Oracle <-> nosql

目标:
确保数据的完整性。
尽量减少对业务的影响,尽量控制停机时间。
业务可接受的时间,0分钟,1分钟,10分钟,1小时,1天

数据量大小,10G,50G,100G,200G,1T?
注:
把迁移分成全量迁移,增量迁移两个步骤。

点击下载:
淘宝海量数据快速迁移实践.pdf

你可能感兴趣的:(数据迁移)