大数据MaxCompute教程（阿里云离线数仓项目）学习笔记20231128

学习视频

2.2.x DataWorks 和 MaxCompute

DataWorks 基于阿里云MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
MaxCompute 是面向分析的企业级SaaS模式云数据仓库，以Serberless框架提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效的分析处理海量数据。数以万计的企业正基于MaxCompute进行数据计算与分析，将数据高效转换为为业务洞察。

MaxCompute：
SQL MR 图计算 机器学习
MaxCompute Engine 统一计算引擎
伏羲：分布式调度系统
盘古：分布式文件系统
存储集群 存储集群 存储集群

盘古👉Hadoop中的HDFS
伏羲👉Hadoop中的YARN
MaxCompute👉MR、Tez等计算引擎

MaxCompute和DataWorks一起向用户提供完善的ETL和数仓管理能力，以及SQL、MR、Graph等多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，能降低企业成本，保障数据安全