BpFile(id=298, bpId=172, name=数据迁移上云, author=null, keyword=OSS数据迁移、NAS数据迁移、在线移服务、ossimport、rsync, description=企业上云过程中涉及的数据(FTP文件、第三方存储文件、NAS)迁移上云的最佳实践,主要含以下几种迁移方案:ossimport、在线迁移服务、rsync等。, position=null, ossUrl=bp-75G1LAW043FVCFUM.pdf, tags=null, level=null, tagList=null, products=null, productList=null, hotspot=null, oneClick=1, createTime=null, modifiedTime=null, timeConsuming=null, status=1, pdfDescription=
随着越来越多的企业选择将业务系统上云,各种类型的数据如何便捷、平滑的迁移上
云,成了用户上云较为关注的点;业务上云后,因为业务或者其他方面调整等因素,
也存在如跨区域,跨账号等数据迁移的场景。针对以上需求,阿里云上提供了较为丰
富的工具(如ossimport)、服务(在线迁移服务),旨在能够帮助客户便捷进行数据迁
移。
本文通过云架构设计工具CADT来快速创建云上基础资源,并以杭州区域来模拟线
下IDC(或友商),深圳区域模拟阿里云云上资源。通过云上的工具命令、服务来提
供常见数据迁移场景的最佳实践。
, templateId=PGYB5Y6D3R1U5XU2, freetry=null, visitTime=null, visitCount=null, video_url=null, buttonName=null, buttonUrl=null, targetId=PGYB5Y6D3R1U5XU2, partner=null, partnerUrl=null, partnerLogo=null, cooperation=null, cooperationList=null)
1
阿里云
企业上云实践
数据迁移上云最佳实践
2数据迁移上云最佳实践 文档版本信息
文档版本信息
文本信息
属性 内容
文档名称 数据迁移上云最佳实践
文档编号 172
文档版本 V1.0
版本日期 2020-05-25
文档状态 内部发布
制作人 吉运
审阅人 川知/弦望
文档变更记录
版本编号 日期 作者 审核人 说明
V1.0 2020-10-13 吉运 川知 创建文档
文档版本:20200525 I
3数据迁移上云最佳实践 目录
前言
概述
随着越来越多的企业选择将业务系统上云,各种类型的数据如何便捷、平滑的迁移上
云,成了用户上云较为关注的点;业务上云后,因为业务或者其他方面调整等因素,
也存在如跨区域,跨账号等数据迁移的场景。针对以上需求,阿里云上提供了较为丰
富的工具(如 ossimport)、服务(在线迁移服务),旨在能够帮助客户便捷进行数据迁
移。
本文通过云架构设计工具 CADT来快速创建云上基础资源,并以杭州区域来模拟线
下 IDC(或友商),深圳区域模拟阿里云云上资源。通过云上的工具命令、服务来提
供常见数据迁移场景的最佳实践。
应用范围
通过在线迁移服务将本地 IDC或者友商的存储数据迁移至阿里云对象存储 OSS。
云上客户通过云企业网+在线迁移服务实现跨区域进行 NAS数据增量迁移。
通过 ossimport或者 rsync等第三方开源命令迁移数据。
名词解释
对象存储 OSS:Object Storage Service,简称 OSS,是阿里云提供的海量、安
全、低成本、高可靠的云存储服务,提供 99.9999999999%(12个 9)的数据持久
性。使用 RESTful API 可以在互联网任何位置存储和访问,容量和处理能力弹性
扩展,多种存储类型供选择全面优化存储成本。详见:
https://www.aliyun.com/product/oss
专有网络 VPC:Virtual Private Cloud,简称 VPC,是基于阿里云创建的自定义
私有网络,不同的专有网络之间二层逻辑隔离。您可以在自己创建的专有网络内
创建和管理云产品实例,比如 ECS、负载均衡、RDS等。在部署云资源前,您
需要结合具体业务,规划 VPC 和交换机的数量及网段等。详见:
https://www.aliyun.com/product/vpc
云企业网 CEN:Cloud Enterprise Network,是承载在阿里云提供的高性能、低
延迟的私有全球网络上的一张高可用网络。云企业网可帮助您在不同地域 VPC
间,VPC与本地数据中心间搭建私网通信通道,通过自动路由分发及学习,提高
网络的快速收敛和跨网络通信的质量和安全性,实现全网资源的互通,帮助您打
文档版本:20200525 II
4数据迁移上云最佳实践 目录
造一张具有企业级规模和通信能力的互联网络。详见:
https://www.aliyun.com/product/cbn
访问控制 RAM:是阿里云提供的管理用户身份与资源访问权限的服务。详见:
https://www.aliyun.com/product/ram
文件服务 NAS:阿里云文件存储 NAS是一个可共享访问,弹性扩展,高可靠,
高性能的分布式文件系统。广泛应用于容器存储、大数据分析、Web 服务和内容
管理、应用程序开发和测试、媒体和娱乐工作流程、数据库备份。支持冷热数据
分级存储 。详见:https://www.aliyun.com/product/nas
云服务器 ECS:云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩
的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。
详见:https://www.aliyun.com/product/ecs
文档版本:20200525 III
5数据迁移上云最佳实践 目录
目录
文档版本信息 .............................................................................................................................................................. I
法律声明 ...................................................................................................................................................................... I
前言 ............................................................................................................................................................................. II
目录 ............................................................................................................................................................................ IV
最佳实践概述 ............................................................................................................................................................. 1
前置条件 ..................................................................................................................................................................... 3
1. 测试资源准备 ..................................................................................................................................................... 4
1.1. 资源规划列表 ..................................................................................................................................... 4
1.2. 资源创建 ............................................................................................................................................. 5
1.3. 创建 RAM用户 ................................................................................................................................. 12
2. 使用 ossimport进行数据迁移 ......................................................................................................................... 17
2.1. ossimport介绍 .................................................................................................................................. 17
2.2. 安装 ossimport(单机版) .............................................................................................................. 18
2.3. 修改 ossimport 的配置文件(单机版) ........................................................................................ 19
2.4. 启动 ossimport并验证迁移结果 (单机版) ............................................................................... 21
2.5. 安装 ossimport(分布式版) .......................................................................................................... 23
2.6. 修改 ossimport 的配置文件(分布式版) .................................................................................... 25
2.7. 启动 ossimport(分布式版)并验证迁移结果 ............................................................................. 28
3. 使用阿里云在线迁移服务进行数据迁移........................................................................................................ 31
3.1. 创建源地址 ....................................................................................................................................... 31
3.2. 创建目的地址 ................................................................................................................................... 32
3.3. 创建迁移任务 ................................................................................................................................... 33
3.4. 核查迁移结果 ................................................................................................................................... 36
4. 通过 CEN跨区域迁移 NAS ............................................................................................................................... 38
4.1. 源端/目标端的 ECS挂载 NAS .......................................................................................................... 38
4.2. CEN配置、VPC间网络联通确认 .................................................................................................... 40
4.3. 购买并配置跨地域带宽包 ............................................................................................................... 43
4.4. 配置在线迁移服务进行 NAS数据迁移 ........................................................................................... 46
4.5. 使用 Rsync迁移 NAS ........................................................................................................................ 52
文档版本:20200525 IV
6数据迁移上云最佳实践 概述
最佳实践概述
场景描述
本最佳实践构建以下场景:
以杭州地域模拟线下 IDC,使用 ECS+云盘模拟本地存储数据,杭州地域模拟阿里
云。通过 ossimport、在线迁移服务等方式将数据从第三方存储迁移到 OSS,并确
保在迁移时候不影响现有业务。
云上用户通过云企业网+NAS在线迁移服务实现跨区域、跨账号迁移 NAS上的数
据,并确保能实现增量迁移(减少业务停机时长)
示例应用场景
线下 IDC数据 迁移至阿里云 OSS
线下 NAS数据迁移至阿里云 NAS
线上杭州区域 NAS数据通过 CEN迁移至深圳区域 NAS
方案架构
1
文档版本:20200525
7数据迁移上云最佳实践 概述
2
文档版本:20200525
8数据迁移上云最佳实践
前置条件
在进行本文操作前,您需要完成以下准备:
注册阿里云账号,并完成实名认证。您可以登录阿里云控制台,并前往实名认证
页面(https://account.console.aliyun.com/v2/#/authc/home)查看是否已经完成
实名认证。
阿里云账户余额大于 100 元。您可以登录阿里云控制台,并前往账户总览页面
(https://expense.console.aliyun.com/#/account/home)查看账户余额。
开通如下服务:
对象存储 OSS
文件存储 NAS
云架构设计工具 CADT
3
文档版本:20200525