在 Doris 中有如下三個(gè)階段發(fā)生：

每一批次數(shù)據(jù)導(dǎo)入的 ETL 階段。該階段會(huì)在每一批次導(dǎo)入的數(shù)據(jù)內(nèi)部進(jìn)行聚合。

底層 BE 進(jìn)行數(shù)據(jù) Compaction 的階段。該階段，BE 會(huì)對(duì)已導(dǎo)入的不同批次的數(shù)據(jù)進(jìn)行進(jìn)一步的聚合。

數(shù)據(jù)查詢階段。在數(shù)據(jù)查詢時(shí)，對(duì)于查詢涉及到的數(shù)據(jù)，會(huì)進(jìn)行對(duì)應(yīng)的聚合。

數(shù)據(jù)在不同時(shí)間，可能聚合的程度不一致。

比如一批數(shù)據(jù)剛導(dǎo)入時(shí)，可能還未與之前已存在的數(shù)據(jù)進(jìn)行聚合。

但是對(duì)于用戶而言，用戶只能查詢到聚合后的數(shù)據(jù)。

即不同的聚合程度對(duì)于用戶查詢而言是透明的。

用戶需始終認(rèn)為數(shù)據(jù)以最終的完成的聚合程度存在，而不應(yīng)假設(shè)某些聚合還未發(fā)生。

總結(jié)

以上是生活随笔為你收集整理的Doris 数据聚合的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。