【征文大赛投稿】+数据迁移交付篇+20200216

digest [复制链接]
发表于 : 2020-2-16 22:33:26 最新回复:2020-02-27 11:44:14
825 11

    数据迁移是一项严谨、系统性的工作,稍有不慎就会带来不可预估的损失!结合HCIE理论与自身实施经验,分享遇到数据迁移项目该如何着手。

一、     了解迁移背景,常见迁移诱因:

1、 传统IT向新设备迁移;

2、 数据量增长,需迁移至性能或容量更高的存储设备;

3、 数据中心搬迁;

4、 其他客观原因,比如:维护、性能调优等。

二、     分析IT系统现状:

1、 核算涉及迁移的IT系统硬件设备,计算资源使用情况(CPU、内存、存储容量);

2、 统计软件清单及类别,包括软件资源使用情况;

3、 描述迁移所涉及设备的组网拓扑,含整体组网和局部组网,局部组网包括SAN网络、数据交换网络、安全网络及网络流量模型。(重要)

三、     迁移前信息收集

1、 主机操作系统版本、CPU、内存信息、HBA卡等

2、 存储多路径配置信息

3、 卷管理软件版本、结构及配置信息

4、 文件系统信息

5、 业务应用的(存储)配置信息及相应权限信息

6、 原存储映射给主机的LUN大小、主机ID等磁盘属性信息

7、 原存储阵列的版本

8、 交换机型号、firmware版本

9、 虚拟机迁移额外收集虚拟机系统Checklist

四、     可行性分析

1、 源和目的硬件兼容性分析;为保证迁移完成后,应用软件可以正常访问并使用数据,需提前确认硬件兼容性。

2、 停机时间要求,在线还是离线。基于迁移技术与迁移可靠性,一般迁移主推离线。

3、 业务容量。迁移完成后,考虑后期业务系统数据量增加,在原有存储容量基础上,建议多预留2-3年数据存储容量。

4、 客户其他要求

五、     迁移风险分析

1、 数据全量备份(务必要求迁移前备份数据)

2、 业务中断时间。迁移前必须明确客户可容忍业务中断的时间

3、 数据丢失风险。决定迁移方案选型及迁移风险级别

4、 方案选择。综合可行性与迁移风险选择最佳迁移方案

六、     选择主流迁移方案

1.   基于存储迁移方案

1VIS卷镜像

231240mwv9ernrrv0utwv0.png

2SmartVirtualization+SmartMigration

231241nfav7f21gxda651l.png

231241xlpcjlwcnyc0jala.png

3Hyper_LUNCopy

231241pqpruhhj454z5h6q.png

4Hyper_Replication

231241j3ukxt31fcgr60qq.png

2.     基于系统迁移方案

LVM Mirror

231242cgvxzfsi3i0r3ir0.png

VxVM mirror

卷镜像

Robocopy

231242hipc6k6nilplzjfu.png

Rysnc

231242rmyzcqc07mnqz9gk.png

3.   基于应用迁移方案

1)数据库迁移:ASMdataguardexp/imp

2)虚拟机迁移:VmotionRainbow

231243tdbcnc6oiojnznvj.png

4.   基于网络迁移

CIFSNFS

七、     迁移方案设计原则:

1、 数据安全性、可靠性 

2、 减少中断业务,最大限度缩短窗口时间

3、 提高数据迁移效率,选择最佳数据迁移方式。

八、     迁移方案内容要素

1、 迁移拓扑(迁移前、迁移中、迁移后)

2、 总体流程

3、 时间规划与分工

4、 实施具体步骤,具体到命令、具体到实施时间点、具体到实施人。

5、 风险评估

6、 包含应急回退步骤

九、     数据迁移实施

严格按照实施方案内容操作,根据客户属性与危险系数提交高危操作变更流程。

十、     数据迁移验收

1、 数据验收

数据完整性、一致性是数据迁移完成的基础。可以通过手动抽样检测和自动校验工具等方式来验证源和目标数据一致性。

2、 业务验收

数据完成验收基础上,需保证业务可以正常运行

十一、  迁移项目举例

1、 背景信息

某局点配置了18台联想x86服务器;配置了2台磁盘阵列,一台是EMC CX-4 480磁盘阵列,物理容量为84TB84*1TB SATA),另一台是EMC-VNX5300,物理容量为4.5TB15*300GB);配置了240端口的B***ade DS 5100B SAN交换机,每台含32SFP接口模块,已经使用了25个端口、剩余15个端口(7个含模块+8个不含模块);配置了Oracle RACIBM GPFS等基础软件。EMC CX-4 480磁盘阵列作为核心数据存储设备,容量划分为2个部分,一部分共享给全部18x86服务器用做并行文件共享存储,另一部分专门划分给DB01DB02服务器用做Oracle RAC数据库存储。

2、 迁移原因:存储设备老旧,存储产商停止维护。

3、 迁移目标:实现EMC-CX4 480EMC-VNX5300与新建存储系统18500 V5的平 稳更替,不影响业务系统正常运行;实施结束后,EMC存储具备停机下架能 力。

4、 迁移风险:

1)   服务器和存储设备老旧,厂商停止运维;

2)   应用软件为单位定制系统,应用层没有可依赖的迁移工具;

3)   操作系统为定制的Linux系统,非开源主流操作系统。

5、 兼容性测试

鉴于华为的SmartVirtualization SmartMigration 解决方案之前未实施过客户的业务模型,所以本项目要求正式实施之前,按照正式实施步骤,进行一次严格的测试验证。

1)   向客户申请测试环境

2)   根据实施文档,进行测试配置;

3)   实施异构接管和数据迁移工作;

a)   异构过程业务停机时间窗口;

b)   验证华为UltraPath与现有业务系统是否匹配兼容

c)   记录异构过程中发现的问题;

4)   将异构接管及迁移测试过程中出现的问题,整理反馈至华为研发部门,以便提供可行的解决方案。

6、 设计原则

1)   数据安全性、可靠性;

2)   减少中断业务,最大限度缩短窗口时间(需要业务停机);

3)   提高数据迁移效率,选择最佳数据迁移方式;

7、 方案设计依据

1)   华为OCEANSTOR 18500 V3存储的SmartVirtualization高级特性,实现异构接管第三方(可兼容性)存储产品,对于本项目,即EMC VNX5300CX4-480存储。

2)   华为OCEANSTOR 18500 V3存储的SmartMigration 高级特性,可以实现存储内或存储间的数据迁移,本项目设计使用存储间的迁移功能。

3)   华为OCEANSTOR 18500 V3存储的LUN伪装功能,保证业务主机侧对于存储LUN的识别不变。

4)   EMC CX4-480VNX5300存储符合华为OCEANSTOR 18500 V3存储异构接管要求。

8、 迁移拓扑

迁移前拓扑

231243ozl93n8n3uaz3akk.png

迁移中拓扑

231243le1l7ayuknfp77k7.png

迁移后拓扑

231243unv9ieafi5yk2hea.png

9、 具体实施步骤

   异构实施过程:

1)   收集信息:收集源存储(EMC)硬件及软件版本信息,收集存储配置信息;收集主机业务平台信息,收集主机系统环境信息等;

2)   查验华为18500V3HCL(兼容),确定EMCCX4-480VNX5300兼容;

3)   搭建存储间物理FC链路,并做相应的ZONE配置告知用户业务停止时间,并配合用户做好停机工作;

4)   在华为存储端添加远端存储(EMC)设备,并执行全量扫盘;

5)   创建eDevLUN资源,与外部LUN建立匹配关系;

6)   接管成功后,创建目标存储与业务主机的映射关系;

 

数据迁移实施过程

7)   检查环境运行正常后,创建目标LUN LUN组(目标LUN的容量至少大于外部LUN容量的1%);

8)   根据规划,将eDevLUN与目标LUN一一对应关系,创建SmartMigration并启用数据迁移(在线);

 

           具体实施步骤、回退步骤及验证步骤省略。

 


  • x
  • 常规:

点评 回复

跳转到指定楼层
刘成功
刘成功   发表于 2020-2-17 10:39:55 已赞(2) 赞(2)

沙发,感谢楼主分享!赞赞赞
  • x
  • 常规:

点评 回复

luoguanjun
luoguanjun   发表于 2020-2-17 10:41:58 已赞(3) 赞(3)

数据迁移是IT技术难题,是一门细心的学问。【征文大赛投稿】+数据迁移交付篇+20200216-3223354-1
  • x
  • 常规:

点评 回复

myt_ma
myt_ma   发表于 2020-2-17 10:44:42 已赞(2) 赞(2)

已收藏,经常会遇到数据迁移项目。感谢分享!
  • x
  • 常规:

点评 回复

wwx_wang
wwx_wang   发表于 2020-2-17 10:46:38 已赞(2) 赞(2)

WOW,已收藏,感谢楼主分享!
  • x
  • 常规:

点评 回复

ww_d
ww_d   发表于 2020-2-18 12:32:12 已赞(1) 赞(1)

给力!
  • x
  • 常规:

点评 回复

user_3728202
user_3728202   发表于 2020-2-18 13:15:33 已赞(1) 赞(1)

讲的太好了,赞
  • x
  • 常规:

点评 回复

user_3728208
user_3728208   发表于 2020-2-18 13:19:17 已赞(1) 赞(1)

天呐 这是什么神仙论文 太赞了 大爱作者
  • x
  • 常规:

点评 回复

user_2911149
user_2911149   发表于 2020-2-18 17:55:10 已赞(0) 赞(0)

已收藏
  • x
  • 常规:

点评 回复

喝酸奶不舔盖
喝酸奶不舔盖  新锐 发表于 2020-2-19 10:01:13 已赞(1) 赞(1)

刘成功 发表于 2020-02-17 10:39 沙发,感谢楼主分享!赞赞赞
【征文大赛投稿】+数据迁移交付篇+20200216-3224894-1【征文大赛投稿】+数据迁移交付篇+20200216-3224894-2【征文大赛投稿】+数据迁移交付篇+20200216-3224894-3
  • x
  • 常规:

点评 回复

12
返回列表
发表回复
您需要登录后才可以回帖 登录 | 注册

警告 内容安全提示:尊敬的用户您好,为了保障您、社区及第三方的合法权益,请勿发布可能给各方带来法律风险的内容,包括但不限于政治敏感内容,涉黄赌毒内容,泄露、侵犯他人商业秘密的内容,侵犯他人商标、版本、专利等知识产权的内容,侵犯个人隐私的内容等。也请勿向他人共享您的账号及密码,通过您的账号执行的所有操作,将视同您本人的行为,由您本人承担操作后果。详情请参看“隐私声明
如果附件按钮无法使用,请将Adobe Flash Player 更新到最新版本!
登录参与交流分享

登录参与交流分享

登录