当前位置: 首页 > news >正文

大数据之Schedule调度错误(一)

 当我们在利用ooize发起整个任务的调度过程中,如果多个调度任务同时运行并且多个调度任务操作了相同的表,那么就会出现如下的错误关系:

Invalid path ''hdfs://iZh5w01l7f8lnog055cpXXX:8000/user/admin/xxx'':
No files matching path hdfs://iZh5w01l7f8lnog055cpXXX:8000/user/admin/xxx

解决方案: 

 这是因为这导入任务与另一个导入任务冲突了。这两个导入任务都是导入同一张表,sqoop导入会将源表的数据临时放在路径'hdfs://masterf:8020/user/root/'下,再将数据mv到目标表location下。当两个任务同时启动,其中一个任务会将路径'hdfs://masterf:8020/user/root/'下的数据MV,另一个任务就会读取不到数据,就会 报该错误。

  解决方案:

      将这两个任务调整调度时间间隔开。

http://www.lryc.cn/news/362467.html

相关文章:

  • DiffIR论文阅读笔记
  • prometheus+alertmanager+webhook钉钉机器人告警
  • ctfshow 年CTF web
  • 原型链、闭包、手写一个闭包函数、 闭包有哪些优缺点、原型链继承
  • linux中SSH_ASKPASS全局变量的作用
  • 9 -力扣高频 SQL 50 题(基础版)
  • TCP的重传机制
  • pg 数据库,获取时间字段值的具体小时,赋值给其他字段
  • 做视频号小店什么类目最容易爆单?其实,弄懂这三点就会选品了
  • Nginx作为下载站点
  • vue3简单快速实现主题切换功能
  • 国联易安:网络反不正当竞争,要防患于未然
  • Linux 网络配置 01
  • 快速入门C++正则表达式
  • java —— 缓冲字符输入流/缓冲字符输出流
  • blender从视频中动作捕捉,绑定到人物模型
  • 掘金滑块验证码安全升级,继续破解
  • 数据结构练习题——Java实现
  • 行为设计模式之状态模式
  • 找回以前的视频:技术与实践3个指南
  • GCN 代码解析(一) for pytorch
  • 2024年云计算、信号处理与网络技术国际学术会议(ICCCSPNT 2024)
  • 希尔排序法
  • thinkphp6.0版本下子查询sql处理
  • flowable工作流 完成任务代码 及扩展节点审核人(实现多级部门主管 审核等)详解【JAVA+springboot】
  • 【电源专题】一体成型电感为什么需要注意耐压问题
  • 如何看待时间序列与机器学习?
  • vue图标不显示
  • 文件夹如何加密码全攻略,5个文件夹加密方法新手也能学
  • useState和store的区别