原创力文档- 1、本文档共21页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
DTCC2011
DTCC2011
海量数据迁移方案
徐进挺
微博：tb丁原
dingyuan@
日期：201104
1
大纲
DTCC2011
DTCC2011
1.数据迁移的场景，目标是什么
2.全量迁移常见方案
3.增量迁移常见方案
4.oracle-mysql简单案例
场景是什么 DTCC2011
DTCC2011
场景：
表太“大”
业务架构调整，数据需要重新分布
enq: HW - contention
enq: TX - row lock contention
enq: TX - index contention
需求：
表需要从1个库迁移到另外的库中
迁移对应关系可能是1-1, 1-N, N-1,N-M
源，目标端环境可能是：Oracle - oracle，Oracle -
mysql，Oracle - nosql
目标是什么 DTCC2011
DTCC2011
目标：
确保数据的完整性。
尽量减少对业务的影响，尽量控制停机时间。
业务可接受的时间，0分钟，1分钟，10分钟，1小时，1天
？
数据量大小，10G，50G，100G，200G，1T？
注：
把迁移分成全量迁移，增量迁移两个步骤。
大纲
DTCC2011
DTCC2011
1.数据迁移的场景，目标是什么
2.全量迁移常见方案
3.增量迁移常见方案
4.oracle-mysql简单案例
全量迁移 DTCC2011
DTCC2011
1.Exp/imp/expdp/impdp
2.Insert into table select * from table@Dblink
3.Select * from table into outfile/load data(mysql)
4.Extent-rowid
5.Mv refresh
6.Sqluldr/load data （/software/sqluldr.zip ）
7.Rowid(pkid)/procedure
8.Perl
9.Tddl数据层
使用过哪些方案 DTCC2011
DTCC2011
选择简单，高效，高可靠性的方案
全量迁移的风险点 DTCC2011
DTCC2011
场景
文档评论（0）