成丰离线数仓架构1.0

Published: by Creative Commons Licence

成丰离线数仓架构1.0

1.开发管理平台dataworks

可视化的、提供数据集成、数据开发、数据地图、数据质量和数据服务等全方位的产品一站式服务。操作可视、减低开发成本及难度。

2.数据总线消息队列datahub

DataHub是流式数据的处理平台,提供对流式数据的发布,和分发功能,提供数据的解耦、削峰。

3.计算框架maxcompute

阿里云基于hive的二次开发是一种大数据计算服务MaxCompute(原名ODPS)快速、完全托管的EB级数据仓库解决方案。

4.指标存储rds

主从、主备的mysql集群,是OLTP数据库,主要用于承接业务中的事务处理,处理的数据量不高。

5.大屏展示dataV

侧重数据的丰富展示效果。适用用于投射大屏。不注重用户的交互与灵活分析。

6.BI报表工具quickBI

侧重于给专业的运营、数据分析师通过多页面的图形报表,进行较为灵活的、交互性强的维度分析。适用于分析人员利用电脑进行浏览翻页查看。

成丰离线数仓架构图