BpFile(id=155, bpId=115, name=EHPC混合云渲染, author=null, keyword=渲染,影视,动画,高性能计算,HPC,Deadline, description=在混合云环境下基于EHPC及其缓存机制,云端计算集群挂载客户本地存储进行渲染。, position=null, ossUrl=bp-EWBWR25IAHTQ2L4Y.pdf, tags=null, level=null, tagList=null, products=null, productList=null, hotspot=null, oneClick=1, createTime=null, modifiedTime=null, timeConsuming=null, status=1, pdfDescription=
介绍在混合云环境下,利用E-HPC及其文件缓存机制,无缝读取线下存储中的项目资产,免去复杂繁琐的文件同步问题;充分利用云上资源弹性、按使用付费的优势,构建高性能、高可靠和可扩展的渲染服务。
解决问题
l混合云环境下本地集群与云端集群一体化的渲染服务。
l避免繁琐复杂的本地与云端的文件同步问题。
l低成本、高效率应对渲染业务峰值。
产品列表
l云服务器、GPU云服务器
l高性能计算E-HPC
l专有网络VPC
l云企业网CEN
l弹性公网IP EIP
l访问控制RAM l文件存储NAS
, templateId=I5HLRJ6GAI6S3LWE, freetry=null, visitTime=null, visitCount=null, video_url=null, buttonName=null, buttonUrl=null, targetId=I5HLRJ6GAI6S3LWE, partner=null, partnerUrl=null, partnerLogo=null, cooperation=, cooperationList=null)
1
E-HPC 混合云渲染最佳实践
场景描述
部署架构图:
介绍在混合云环境下,利用 E-HPC 及其文件缓存机制,无
缝读取线下存储中的项目资产,免去复杂繁琐的文件同步
问题,充分利用云上资源弹性、按使用付费的优势,构建
高性能、高可靠和可扩展的渲染服务。
解决问题
l 混合云环境下本地集群与云端集群一体化的渲染服务。
l 避免繁琐复杂的本地与云端的文件同步问题。
l 低成本、高效率应对渲染业务峰值。
产品列表
l 云服务器、GPU 云服务器
l 高性能计算 E-HPC
l 专有网络 VPC
l 云企业网 CEN
l 弹性公网 IP EIP
l 访问控制 RAM
l 文件存储 NAS
文档版本:20191129
2云服务器 ECS(产品名称) 文档模板(手册名称)/文档版本信息
阿里云
企业上云实践
E-HPC 混合云渲染
最佳实践
文档版本:20150122(发布日期)
II
3E-HPC混合云渲染最佳实践 文档版本信息
文档版本信息
文本信息
属性 内容
文档名称 E-HPC 混合云渲染最佳实践
文档编号 115
文档版本 V1.3
版本日期 2020-02-27
文档状态 外部发布
制作人 谈慧杰
审阅人 -
文档变更记录
版本编号 日期 作者 审核人 说明
V1.0 2019-11-16 谈慧杰 - 创建
V1.1 2019-11-29 筱晖 - 文档优化
V1.2 2019-12-16 谈慧杰 增加概览页
增加 ehpcfs windows 环
V1.3 2020-02-27 谈慧杰
境部署方法
文档版本:20200227 I
4前言
E-HPC混合云渲染最佳实践
前言
概述
本文介绍基于 E-HPC 及其缓存机制在混合云环境下,云端 E-HPC 集群挂载客户本
地 NAS 存储进行渲染需要开通的相关产品、配置的方法和操作步骤。
应用范围
需要构建混合云渲染服务的单位或企业。
名词解释
l E-HPC:弹性高性能计算(E-HPC)基于阿里云基础设施,为用户提供一站式公
共云 HPC/AI 平台服务,面向科研,生产,教育和行业大计算,提供快捷,弹性,
安全和与阿里云产品互通的云超算平台。 。
l NAS:阿里云文件存储 NAS是一个可共享访问,弹性扩展,高可靠,高性能的
分布式文件系统。兼容 POSIX 文件接口,可支持数千台计算节点共享访问,可
以挂载到弹性计算 ECS、神龙裸金属、容器服务 ACK、弹性容器 ECI、批量计
算 BCS、 高性能计算 EHPC, AI训练 PAI等计算业务上提供高性能的共享存储,
用户无需修改应用程序,即可无缝迁移业务系统上云。
l 渲染:渲染在电脑绘图中是指用软件从模型生成图像的过程。 。
l Deadline:Thinkbox出品的一款渲染任务分发及计算资源管理软件。
文档版本:20200227 III
5目录
E-HPC混合云渲染最佳实践
目录
文档版本信息 .............................................................................................................................................................. I
法律声明 ..................................................................................................................................................................... II
前言 ............................................................................................................................................................................ III
目录 ........................................................................................................................................................................... IV
最佳实践概述 ............................................................................................................................................................. 1
前置条件 ..................................................................................................................................................................... 3
资源规划 ..................................................................................................................................................................... 4
1. 配置 RAM用户 .................................................................................................................................................... 5
2. 部署本地渲染服务 ............................................................................................................................................ 11
2.1. 创建专有网络 .................................................................................................................................... 11
2.2. 创建 NAS实例 ................................................................................................................................... 15
2.3. 部署 Deadline Server ......................................................................................................................... 20
2.4. 部署 Deadline Worker ........................................................................................................................ 30
2.5. 创建并复制 Deadline Worker镜像 ................................................................................................... 38
2.6. 部署员工 PC ...................................................................................................................................... 41
2.7. 更新安全组设置 ................................................................................................................................ 69
3. 部署 EHPC渲染集群 ......................................................................................................................................... 73
3.1. 创建专有网络 .................................................................................................................................... 73
3.2. 创建云企业网 .................................................................................................................................... 75
3.3. 购买并配置跨地域带宽包 ................................................................................................................ 78
3.4. 创建 NAS实例 ................................................................................................................................... 81
3.5. 验证 Deadline Client镜像 ................................................................................................................. 85
3.6. 部署 EHPCFS ...................................................................................................................................... 92
3.7. 创建 EHPC渲染集群 ......................................................................................................................... 97
4. 执行渲染任务 .................................................................................................................................................. 102
4.1. 清理渲染集群 .................................................................................................................................. 102
4.2. 渲染集群手动扩容 .......................................................................................................................... 106
4.3. 设置目录映射 .................................................................................................................................. 108
4.4. 提交渲染作业 .................................................................................................................................. 110
4.5. 查看渲染效果 .................................................................................................................................. 114
文档版本:20200227 IV
6最佳实践概述
E-HPC混合云渲染最佳实践
最佳实践概述
概述
本文重点介绍在混合云环境下,利用 E-HPC 及其文件缓存机制,构建云上云下一体
化的渲染服务。充分利用云上资源弹性、按使用付费的优势,构建高性能、高可靠和
可扩展的渲染服务。E-HPC 缓存机制使用云 NAS 作为缓存存储层,使得云上计算集
群可以直接挂载云下 NAS 存储,按需读取所需的场景数据,解决了云端渲染需要将
场景数据先行同步到云端复杂、繁琐的问题;同时云上计算集群优先从缓存层读取数
据,大幅降低对云上云下网络互联链路的带宽需求。
整体架构
文档版本:20200227 1
7最佳实践概述
E-HPC混合云渲染最佳实践
本文模拟环境说明
在阿里云华北 2(北京)地域模拟客户本地 IDC 环境,使用 VPC、ECS、云 NAS搭
建本地渲染服务。
在阿里云华北 5(呼和浩特)地域搭建 E-HPC 渲染集群,云 NAS 作为缓存存储层。
使用云企业网联通两个地域:华北 2 (北京) 和华北 5 (呼和浩特) , 模拟客户本地 IDC
与云的专线连接。
文档版本:20200227 2
8前置条件
E-HPC混合云渲染最佳实践
前置条件
在进行本文操作之前,您需要完成以下准备工作:
l 注册阿里云账号,并完成实名认证。
l 使用阿里云账号开通以下阿里云产品。
ᅳ 访问控制服务 RAM,产品详情请参见:https://www.aliyun.com/product/ram
ᅳ 专有网络 VPC,产品详情请参见:https://www.aliyun.com/product/vpc
ᅳ 云服务器 ECS,产品详情请参见:https://www.aliyun.com/product/ecs
ᅳ GPU 云服务器,产品详情请参见:https://www.aliyun.com/product/ecs/gpu
ᅳ 弹性公网 IP EIP,产品详情请参见:https://www.aliyun.com/product/eip
ᅳ 云企业网 CEN,产品详情请参见:https://www.aliyun.com/product/cbn
ᅳ 文件存储 NAS,产品详情请参见:https://www.aliyun.com/product/nas
ᅳ 弹性高性能计算 E-HPC,产品详情请参见:
https://www.aliyun.com/product/ehpc
l Deadline 软件。
文档版本:20200227 3