Apache Doris聚合模型建表常见错误解析-CSDN博客

本文链接：https://blog.csdn.net/gitblog_07209/article/details/148944134

Apache Doris聚合模型建表常见错误解析

doris-website Apache Doris Website 是一个开源的 Apache Doris 数据库管理系统的官方网站，用于提供 Apache Doris 的文档、教程、示例和社区信息。它提供了对 Apache Doris 的介绍、安装、配置和使用说明等。适合用于学习和使用 Apache Doris 数据库管理系统。特点和优点包括：全面的信息、易于使用、丰富的文档等。项目地址: https://gitcode.com/gh_mirrors/do/doris-website

在使用Apache Doris的聚合模型(AGGREGATE KEY)建表时，开发者经常会遇到一些典型的语法错误。本文将通过一个实际案例，深入分析这类错误的产生原因及解决方法。

错误案例重现

在创建聚合表时，开发者编写了如下建表语句：

CREATE TABLE IF NOT EXISTS example_tbl_agg
(
    user_id             LARGEINT    NOT NULL,
    load_dt             DATE        NOT NULL,
    city                VARCHAR(20),
    last_visit_dt       DATETIME    REPLACE DEFAULT "1970-01-01 00:00:00",
    cost                BIGINT      SUM DEFAULT "0",
    max_dwell           INT         MAX DEFAULT "0",
)
AGGREGATE KEY(user_id, date, city)
DISTRIBUTED BY HASH(user_id) BUCKETS 10;

错误分析

这个建表语句中存在一个典型错误：在AGGREGATE KEY子句中引用了不存在的列名"date"，而实际表中定义的是"load_dt"列。这种错误会导致建表失败。

聚合模型原理

Apache Doris的聚合模型是一种特殊的数据模型，它允许用户在导入数据时自动对相同维度的数据进行聚合操作。这种模型特别适合分析型场景，可以显著减少存储空间并提高查询性能。

在聚合模型中：

需要明确指定AGGREGATE KEY，这些列的组合决定了数据聚合的维度
其他列可以指定聚合函数，如SUM、MAX、MIN、REPLACE等
当导入数据时，相同维度的行会自动按照指定的聚合函数进行合并

正确写法

修正后的建表语句应该是：

CREATE TABLE IF NOT EXISTS example_tbl_agg
(
    user_id             LARGEINT    NOT NULL,
    load_dt             DATE        NOT NULL,
    city                VARCHAR(20),
    last_visit_dt       DATETIME    REPLACE DEFAULT "1970-01-01 00:00:00",
    cost                BIGINT      SUM DEFAULT "0",
    max_dwell           INT         MAX DEFAULT "0",
)
AGGREGATE KEY(user_id, load_dt, city)
DISTRIBUTED BY HASH(user_id) BUCKETS 10;