当前位置: 首页 > news >正文

Kafka系列之:Connect 中的错误报告

Kafka系列之:Connect 中的错误报告

Kafka Connect 提供错误报告来处理各个处理阶段遇到的错误。默认情况下,转换期间或转换中遇到的任何错误都会导致连接器失败。每个连接器配置还可以通过跳过此类错误、选择性地将每个错误以及失败操作的详细信息和有问题的记录(具有各种详细级别)写入 Connect 应用程序日志来容忍此类错误。当接收器连接器处理从其 Kafka 主题消耗的消息时,这些机制还会捕获错误,并且所有错误都可以写入可配置的“死信队列”(DLQ) Kafka 主题。

要将连接器的转换器、转换或接收器连接器本身内的错误报告到日志,请在连接器配置中设置errors.log.enable=true 以记录每个错误和问题记录的主题、分区和偏移量的详细信息。出于其他调试目的,请设置errors.log.include.messages=true,以将问题记录键、值和标头也记录到日志中(请注意,这可能会记录敏感信息)。

要将连接器的转换器、转换或接收器连接器本身内的错误报告给死信队列主题,请设置errors.deadletterqueue.topic.name,并可选设置errors.deadletterqueue.context.headers.enable=true。

默认情况下,连接器在错误或异常时立即表现出“失败快速”行为。这相当于将以下配置属性及其默认属性添加到连接器配置:

# disable retries on failure
errors.retry.timeout
http://www.lryc.cn/news/324222.html

相关文章:

  • MySQL面试题--开发(最全,涵盖SQL基础、架构、事务)
  • 【移动端】Flutter 获取Android AMap实例
  • 什么是PLC物联网关?PLC物联网关有哪些功能?
  • R-CNN笔记
  • uni-app从零开始快速入门
  • Springboot集成jersey打包jar找不到class处理
  • 基于springboot和vue的旅游资源网站的设计与实现
  • Python编程异步爬虫——协程的基本原理
  • 基于springboot+vue的旅游推荐系统
  • Debezium日常分享系列之:Debezium2.5稳定版本之Monitoring
  • GuLi商城-商品服务-API-三级分类-网关统一配置跨域
  • 【ai技术】(4):在树莓派上,使用qwen0.5b大模型+chatgptweb,搭建本地大模型聊天环境,速度飞快,非常不错!
  • 深入理解PHP+Redis实现分布式锁的相关问题
  • perl:获取同花顺数据--业绩预告
  • 如何对比引用传参和值传参两者的效率
  • 探索软件工程:构建可靠、高效的数字世界
  • 超越肉眼:深入计算机视觉的奇妙之旅
  • mac 安装 nvm 【真解决问题】
  • 【Godot 3.5控件】用TextureProgress制作血条
  • 第十届蓝桥杯大赛个人赛省赛(软件类)真题- CC++ 研究生组
  • Linux:Gitlab:16.9.2 创建用户及项目仓库基础操作(2)
  • 【数据挖掘】实验5:数据预处理(1)
  • 383.赎金信
  • Python 3 教程(8)
  • Mysql数据库深入理解
  • android 音频焦点,音频策略梳理
  • go语言-基础元素与结构的使用
  • 【leetcode热题】 二叉树的右视图
  • 康奋威科技邀您到场参观2024长三角快递物流展
  • linux centos 安装jenkins,并构建spring boot项目