当前位置: 首页 > news >正文

大数据软件,待补充

数据采集:

        实时采集:

                Debezuim

                        Debezuim是构建在 Apach Kafka之上,并提供Kafka连接器来监视特定的数据库管理(采集多种数据库)

                Canal

                        canal 是阿里开发,用于实时采集Mysql 当中变化的数据

                maxwell,flinkX,flinkCDC

        离线采集:

                Sqoop

                DataX

                        致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP,MongDB等各种异构数据源之间稳定高效的数据同步功能

消息中间件

Kafka,Zookeeper

http://www.lryc.cn/news/305144.html

相关文章:

  • 深入探索pdfplumber:从PDF中提取信息到实际项目应用【第94篇—pdfplumbe】
  • 实现linux platform tree框架下ICM20608驱动开发(SPI)
  • 在前端开发中需要考虑的常见web安全问题和攻击原理以及防范措施
  • 年关将至送大礼 社区适时献爱心
  • singularity容器的技术基础
  • jax可微分编程的笔记(2)
  • 在Linux服务器上部署一个单机项目
  • HTTP概要
  • 128 Linux 系统编程6 ,C++程序在linux 上的调试,GDB调试
  • vue2的ElementUI的form表单报错“Error: [ElementForm]unpected width”修复
  • Linux 网络命令指南
  • vue3组件间的通信,通过props,emit,provide和inject把数据传递N个层级,expose和ref实现父组件调用子组件方法
  • 开源免费的NTFS for mac工具mounty
  • Sora-OpenAI 的 Text-to-Video 模型:制作逼真的 60s 视频片段
  • 4 buuctf解题
  • Jmeter基础(3) 发起一次请求
  • 视频怎么变成gif动图?一招教你在线转换
  • Leetcode2583. 二叉树中的第 K 大层和
  • (六)激光线扫描-三维重建
  • CSS 面试题汇总
  • 定制你的【Spring Boot Starter】,加速开发效率
  • Vue源码系列讲解——生命周期篇【二】(new Vue)
  • JavaScript 设计模式之观察者模式
  • 数据结构D4作业
  • springboot750人职匹配推荐系统
  • 【笔记】【开发方案】APN 配置参数 bitmask 数据转换(Android KaiOS)
  • Redis篇之缓存雪崩、击穿、穿透详解
  • 【深度学习笔记】3_2线性回归的从零实现
  • Apache Maven简介
  • #12解决request中getReader()和getInputStream()只能调用一次的问题