BpFile(id=211, bpId=60, name=互联网电商行业离线大数据分析, author=null, keyword=大数据数仓,大屏展示,离线分析,大数据分析,API网关, description=使用阿里云服务实现电商网站销售数据离线分析后在大屏幕上展示,极大地增强数据的可读性。, position=null, ossUrl=bp-MI0FE7TSOPEE759M.pdf, tags=null, level=null, tagList=null, products=null, productList=null, hotspot=null, oneClick=1, createTime=null, modifiedTime=null, timeConsuming=null, status=1, pdfDescription=
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,触控大屏支持用户自助查询数据,极大地增强数据的可读性。
, templateId=U0F70O12ADJINACM, freetry=null, visitTime=null, visitCount=null, video_url=https://yqh.aliyun.com/live/detail/22304, buttonName=null, buttonUrl=null, targetId=U0F70O12ADJINACM, partner=null, partnerUrl=null, partnerLogo=null, cooperation=, cooperationList=null)
1互联网、电商行业离线大数据分析最佳实践
业务架构
场景描述
电商网站销售数据通过大数据分析后将业务指
标数据在大屏幕上展示,如销售指标、客户指标、
销售排名、订单地区分布等。大屏上销售数据可
视化动态展示,效果震撼,触控大屏支持用户自
助查询数据,极大地增强数据的可读性。
解决问题
1. 电商网站数据看板
2. 全国/全球业务态势分析
3. 互联网金融风险数据监控
产品列表
最佳实践频道 阿里云最佳实践技术分享群
MaxCompute
Dataworks
专有网络VPC
云数据库MySQL
云服务器ECS
DataV
2云服务器ECS(产品名称) 文档模板(手册名称)/文档版本信息
阿里云
互联网、电商行业
离线大数据分析及大屏展示
最佳实践
版本日期:20210111
文档版本:20150122(发布日期) 1
3互联网、电商行业离线大数据分析及大屏展示 文档版本信息
文档版本信息
文本信息
属性 内容
文档名称 互联网、电商行业离线大数据分析及大屏展示最佳实践
文档编号 060
文档版本 V1.7
版本日期 2021-01-11
文档状态 外部发布
制作人 弦望毕役
审阅人 -
文档变更记录
版本编号 日期 作者 审核人 说明
V1.0 2019/06/26 弦望 隐林 创建
V1.1 2019/07/24 筱晖 - 文档优化、验证
V1.2 2019/10/10 弦望 - 新增最佳实践概述
V1.3 2019/12/04 弦望 - 新 增 git 下 载
democode
V1.4 2020/01/13 弦望 - 对齐大数据产品最新
功能
V1.5 2020/02/03 弦望 - 新增数据服务API开
发的HTTPS说明
V1.6 2020/03/18 弦望 - 更新新版DataV
V1.7 2021/01/11 毕役 - 更新CADT
文档版本:20210111 I
4互联网、电商行业离线大数据分析及大屏展示 前言
前言
本文介绍了使用阿里云MaxCompute、数据库(RDS)、DataWorks等产品实现电商
网站离线数据分析,分析后的业务指标数据实时在大屏展示。
本文以完整的实践Demo为例,提供从电商网站搭建,数据从RDS同步到
MaxCompute、再到DataWorks进行数据分析,最后在大屏上展示分析结果的全流程
参考示例,可作为客户、架构师做PoC验证使用。
文档版本:20210111 III
5互联网、电商行业离线大数据分析及大屏展示 目录
目录
文档版本信息..................................................................................................................................................................I
.........................................................................................................................................................................
法律声明 II
................................................................................................................................................................................
前言 III
目录...............................................................................................................................................................................IV
................................................................................................................................................................
最佳实践概述 1
前置条件........................................................................................................................................................................1
.............................................................................................................................................
1. 搭建电商网站Demo 2
.......................................................................................
1.1. 通过云架构设计工具CADT部署云上资源 2
1.2. 创建数据库............................................................................................................................................5
....................................................................................................................................
1.3. 电商网站初始化 6
1.3.1. 电商应用环境初始化....................................................................................................................6
......................................................................................................................
1.3.2. 电商网站账号注册 12
.....................................................................................................................................
2. DataWorks大数据处理 14
2.1. 开通DataWorks.................................................................................................................................14
......................................................................................................................................
2.2. 进行数据集成 20
2.3. 使用DataWorks进行数据处理........................................................................................................26
..............................................................................................................................
2.4. 数据服务API开发 30
..................................................................................................................................................
3. DataV大屏展示 41
3.1. 开通DataV服务并创建项目.............................................................................................................41
..........................................................................................................................................
3.2. 添加数据源 44
3.3. 配置离线数据大屏展示......................................................................................................................45
..............................................................................................................
3.4. 更新离线数据大屏展示测试 53
文档版本:20210111 IV
6互联网、电商行业离线大数据分析及大屏展示 最佳实践概述
最佳实践概述
概述
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、
客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,
触控大屏支持用户自助查询数据,极大地增强数据的可读性。
适用场景
电商网站数据看板
全国/全球业务态势分析
互联网金融风险数据监控
方案架构
用户订单等数据同步到MaxCompute;
通过Dataworks对原始数据进行处理并形成开放API;
需要展示的结果数据以API的形式通过DataV在大屏上展示。
方案优势
大规模存储:超大规模存储自动扩容,最大可支持EB级别的数据。
高性能:同时性能更稳定。
文档版本:20210111 1
7互联网、电商行业离线大数据分析及大屏展示 最佳实践概述
低成本:比自建成本更低。
安全:原生的多租户系统,以项目进行隔离,所有计算任务在安全沙箱中运行。
图形化编辑界面,拖拽就可以完成专业级大数据可视化。
文档版本:20210111 2
8互联网、电商行业离线大数据分析及大屏展示 前置条件
前置条件
在进行本实践前,您需要完成以下准备工作:
注册阿里云账号,并完成实名认证。您可以登录阿里云控制台,并前往实名认证
(https://account.console.aliyun.com/v2/#/authc/home)页面查看是否已经完成实
名认证。
阿里云账户余额大于100元。您可以登录阿里云控制台,并前往账户总览
(https://expense.console.aliyun.com/#/account/home)页面查看账户余额。
开通以下服务:
ᅳ RDS数据库,详细参见云数据库RDS。(https://rdsnext.console.aliyun.com/)
ᅳ MaxCompute和Dataworks,详细参见DataWorks。
ᅳ (https://workbench.data.aliyun.com/)
ᅳ ECS,详细参见ECS。(https://ecs.console.aliyun.com/)
ᅳ VPC,详细参见VPC。(https://vpc.console.aliyun.com/)
ᅳ DataV,详细参见DataV。(http://datav.aliyun.com)
任何问题或建议请钉钉扫码联系文档owner:
文档版本:20210111 1