当前位置: 首页 > news >正文

大数据应用组件

1、数据存储
1.1、hive->hdfs、mapredus
1.2、ClickHouse
1.3、Elasticsearch
1.4、PostgreSQL
1.5、HBase

2、数据抽取
2.1、Kettle
2.2、DataX
2.3、Canal
2.4、Flink CDC
2.5、Sqoop
2.6、Filebeat&Logstash(日志)

3、任务编排
3.1、Apache DolphinScheduler

4、数据处理
4.1、spark
4.2、storm
4.3、flink

5、数据分析引擎
5.1、presto
5.2、trino
5.3、StarRocks

6、报表展示
6.1、Davinci达芬奇
6.2、帆软BI
6.3、DataEase
6.4、Prometheus+Grafana
6.5、Kibana

参考资料:常见大数据技术组件及应用场景 (it168.com)

http://www.lryc.cn/news/419651.html

相关文章:

  • Docker Remote API未授权访问漏洞
  • 算法训练.
  • 08、MySQL-事务
  • 2024 年的 Node.js 生态系统
  • LVS(Linux Virtual Server)
  • 回顾Python
  • 【数据结构】队列,你必须知道的内部原理!!!
  • Ubuntu24.04编译FFmpeg6.1(支持x264、x265、fdk-acc)
  • 顺序表-数据结构
  • 如何写出更优雅的并行程序?
  • C#中的Hangfire和Quartz.NET 任务调度的区别
  • 银行卡二三四要素验证-银行卡二三四要素验证接口-银行卡二三四要素
  • C# 设计模式之命令模式
  • pod详解 list-watch机制 预选优选策略 如何指定节点调度pod
  • 深入探索:【人工智能】、【机器学习】与【深度学习】的全景视觉之旅
  • 使用js和css 实现div旋转围绕圆分布排列
  • SQL Server中CPU使用率过高的排查
  • AUTOSAR AP常用文档前缀
  • 服务器迁移基于Tomcat部署的java应用,没有源码怎么办?
  • kafka-go使用:以及kafka一些基本概念说明
  • 景联文科技:破解数据标注行业痛点,引领高质量AI数据服务
  • C#获取Network的相关信息
  • Jenkins 部署Vue项目指引: Vue项目本地跨域代理 、解决ERR_UNSAFE_PORT
  • C语言电子画板
  • Android Gradle开发与应用技术原理
  • Midjourney入门-提示词基础撰写与公式
  • Apache Tomcat服务器版本号隐藏
  • 【Qt】Qt编程注意事项
  • 在Linux系统安装Kafka
  • 【CSharp】简单定义一个异步方法