当前位置: 首页 > news >正文

doris:删除操作概述

在 Apache Doris 中,删除操作(Delete)是一项关键功能,用于管理和清理数据,以满足用户在大规模数据分析场景中的灵活性需求。

Doris 提供了丰富多样的删除功能支持,包括:DELETE 语句、删除标记(delete sign)、分区删除、全表删除以及使用临时分区实现原子覆盖写等功能。下面将详细介绍每一项功能:

DELETE 语句​

删除数据时最常用的是 DELETE 语句,该功能支持所有表模型,用户可以使用它删除符合条件的数据。

DELETE 语句的语法如下:

DELETE FROM table_name WHERE condition;

DELETE 语句基本能满足大部分用户在使用 Doris 过程中的删除需求,但在某些场景下它并不是最高效的。为了灵活高效地满足用户在各类场景的删除需求,Doris 还提供了如下几种删除方式。

分区删除​

在 Doris 中,通过日期分区等方式来管理数据是很常见的实践。很多用户只需要保留最近一段时间的数据(例如 7 天),对于过期的数据分区,可以采用分区删除(truncate partition)功能来进行高效的删除。

相比 DELETE 语句,分区删除只需要修改一些分区元数据即可完成删除,是这种场景下最佳的删除方式。

分区删除的语法如下:

TRUNCATE TABLE tbl PARTITION(p1, p2);

整表删除​

整表删除适用于快速清空表且保留表结构的场景,例如在离线分析场景中需要重做数据时。

整表删除的语法如下:

TRUNCATE TABLE table_name;

删除标记(Delete Sign)​

数据删除可以视作数据更新的一种情况。因此,在具有更新能力的主键模型(Unique Key)上,用户可以通过删除标记功能,使用数据更新的方式实现删除操作。

例如在 CDC 数据同步场景中,CDC 程序可以将一条 DELETE 操作的 binlog 打上删除标记,当这条数据写入 Doris 时,就会删除掉对应的主键。

这种方式相对于 DELETE 语句来说,可以批量进行大量主键的删除操作,效率较高。

删除标记属于高级功能,使用起来相比前几种要更复杂一些,详细的用法请参考文档批量删除。

使用临时分区实现原子覆盖写​

某些情况下,用户希望能够重写某一分区的数据,但如果采用先删除再导入的方式进行,在中间会有一段时间无法查看数据。这时,用户可以先创建一个对应的临时分区,将新的数据导入到临时分区后,通过替换操作,原子性地替换原有分区,以达到目的。详细用法请参考文档表原子替换。

http://www.lryc.cn/news/531244.html

相关文章:

  • 【思维导图】redis
  • 申博经验贴
  • .Net Core笔记知识点(跨域、缓存)
  • YOLOV11-1:YoloV11-安装和CLI方式训练模型
  • 自学习记录-编程语言的特点(持续记录)
  • TypeScript (TS) 和 JavaScript (JS)
  • 【HarmonyOS之旅】基于ArkTS开发(二) -> UI开发三
  • 如何选择Spring AOP的动态代理?JDK与CGLIB的适用场景?
  • 手机连接WIFI可以上网,笔记本电脑连接WIFI却不能上网? 解决方法?
  • MySQL不适合创建索引的11种情况
  • 树莓派pico入坑笔记,故障解决:请求 USB 设备描述符失败,故障码(43)
  • GRE阅读双线阅读 --青山学堂GRE全程班 包括 阅读、数学、写作、填空、背单词
  • 98,【6】 buuctf web [ISITDTU 2019]EasyPHP
  • Kamailio、MySQL、Redis、Gin后端、Vue.js前端等基于容器化部署
  • 知识管理系统助力企业信息共享与创新思维的全面提升研究
  • Leetcode 131 分割回文串(纯DFS)
  • 结构体DMA串口接收比特错位
  • 用FormLinker实现自动调整数据格式,批量导入微软表单
  • 技术架构师成长路线(2025版)
  • 独立开发者的技术栈
  • wordpress每隔24小时 随机推荐一个指定分类下的置顶内容。
  • Android13源码下载和编译过程详解
  • C++底层学习预备:模板初阶
  • 使用mybatisPlus插件生成代码步骤及注意事项
  • 扩散模型(二)
  • java异常处理——try catch finally
  • 新月军事战略分析系统使用手册
  • Docker Hub 镜像 Pull 失败的解决方案
  • SQL进阶实战技巧:如何构建用户行为转移概率矩阵,深入洞察会话内活动流转?
  • DeepSeek辅助学术写作关键词选取