《基于阿里云搭建实时数据仓库项目》全套课程链接:
- 项目架构及数据准备
- 实时计算与结果输出
- 制作数据可视化大屏(本课程)
一、项目简介
本套项目,以电商业务应用场景为依托,基于阿里云大数据产品,紧跟大数据主流场景,对接企业实际需求,对电商实时数仓的搭建进行讲解,让你迅速成长,获取最前沿的技术经验。
二、项目架构
本项目使用的阿里云产品有:
- RDS:阿里云关系型数据库(Relational Database Service,简称RDS)是一种稳定可靠、可弹性伸缩的在线数据库服务。
- DateHub:类似于传统大数据解决方案中Kafka的角色,提供了一个数据队列功能。对于离线计算,DataHub除了供了一个缓冲的队列作用。同时由于DataHub提供了各种与其他阿里云上下游产品的对接功能,所以DataHub又扮演了一个数据的分发枢纽工作;
- DTS:它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。
- 实时计算:是阿里云提供的基于Apache Flink构建的企业级大数据计算平台。
- DataWorks:是基于Stream Studio计算引擎,从工作室、车间到工具集都齐备的一站式大数据工厂,它能帮助你快速完成数据集成、开发、治理、服务、质量、安全等全套数据研发工作;
- DataV:实时展示的可视化大屏
三、项目场景
数仓项目广泛应用于大数据领域,该项目技术可以高度适配电商、金融、医疗、在线教育、传媒、电信、交通等各领域;
四、项目特色
本课程结合国内多家企业实际项目经验,从框架版本选型、系统架构设计、业务流程设计,手把手教你从零开始完成基于阿里云的实时数仓项目。