当前位置: 首页 > news >正文

大数据计算里的-Runtime Filter

文章目录

      • Runtime Filter
      • 示例

Runtime Filter

从纸面意义来看,就是程序在运行时,根据实际的数据去进行一些过滤操作。这和静态的规则优化不同,静态优化不考虑实现的数据的分布。

示例

select a.* ,b.*
a
join 
b 
on a.id=b.id
  • 假设一下数据的分布情况,表b只有一个id=1 的记录,表a有10w条记录,没有此优化的话,
    会导致把表a的记录全部查出来,cost 的资源比较多,如果可以得到数据表b 的实际分布,把表数据的信息push down 到源码数据scan,可以极大的提高程序的运行效率。减少资源的占用

在这里插入图片描述

http://www.lryc.cn/news/476380.html

相关文章:

  • 【工具变量】大数据管理机构改革DID(2007-2023年)
  • Linux -- 初识信号
  • Ubuntu系统如何实现键盘按键映射到其他按键(以 Ctrl+c 映射到 F3,Ctrl+v 映射到 F4 为例)
  • el-select、el-autocomplete的选项内容过长显示完整内容
  • Go-单元测试
  • 【Linux】IPC 进程间通信(一):管道(匿名管道命名管道)
  • Kotlin类与对象
  • Windows版 nginx安装,启动,目录解析,常用命令
  • 基于51单片机的电子隐形防盗网proteus仿真
  • Fish Agent:多语言 Voice-to-Voice 开源语音模型;Runway 推出摄像机运镜功能丨 RTE 开发者日报
  • locust压测工具环境搭建(Linux、Mac)
  • 欠定方程有多个真正解,超定方程可能无解所以有最小二乘解
  • LeetCode27:移除元素
  • JAVA 插入 JSON 对象到 PostgreSQL
  • 视图,物化视图,普通表区别简介
  • C++ | Leetcode C++题解之第530题二叉搜索树的最小绝对差
  • 使用Node.js构建实时聊天应用
  • STM32F103C8T6学习笔记1--新建工程模板
  • RK3568平台开发系列讲解(内存篇)Linux 内存优化
  • 企业数字化转型实施中的挑战与解决方案:架构引领的战略路径
  • 《数字图像处理基础》学习05-数字图像的灰度直方图
  • 【漏洞复现】某平台-QRcodeBuildAction-LoginSSO-delay-mssql-sql注入漏洞
  • Centos安装ZooKeeper教程(单机版)
  • A011-基于SpringBoot的视频点播系统设计与实现
  • 云原生+AI核心技术&最佳实践
  • 【Android】Service
  • 2-142【软件无线电原理与应用作业】基于matlab的圆形阵列的波束形成进行仿真
  • 在目录中按扩展名分类文件(python学习)(11.1)
  • 【网络安全 | 漏洞挖掘】逻辑漏洞+无限制爆破实现业务瘫痪
  • 【WRF工具】MPAS(多尺度预测模型)-输出WRF初始和横向边界条件