当前位置: 首页 > news >正文

Cloudera CDP 7.1.3 主机异常关机导致元数据丢失,node不能与CM通信

问题描述

plaintext

ERROR    Could not load post-deployment data from /var/run/cloudera-scm-agent/process/ccdeploy_hadoop-conf_etchadoopconf.cloudera.yarn_-8903374259073700469
IOError: [Errno 2] No such file or directory: '/var/run/cloudera-scm-agent/process/.../__cloudera_metadata__'
原因与解决
  • 原因
    • 异常关机导致临时目录 /var/run/cloudera-scm-agent/process/ 下的元数据文件丢失。
    • parcel 部署不完整或路径错误。
  • 解决
    1. 清理临时目录并重启 Agent(临时文件可安全删除):

      bash

      rm -rf /var/run/cloudera-scm-agent/process/*
      systemctl restart cloudera-scm-agent
      

    2. 检查 parcel 路径:确认 CDH-7.1.3 的 parcel 路径(如 /home/opt/cloudera/parcels/)是否正确,若路径错误,需在 Cloudera Manager 中重新指定 parcel 存储路径并重新部署。
    3. 重新部署相关服务配置:在 Cloudera Manager Web 界面中,找到 YARN 服务,重新部署客户端配置(hadoop-conf),确保元数据文件重新生成。

相关文章:

  • 大数据技术全景解析:Spark、Hadoop、Hive与SQL的协作与实战
  • Qt开发经验:回调函数的线程归属问题及回调函数中更新控件的问题
  • ASP.NET MVC4 技术单选及多选题目汇编
  • (九)PMSM驱动控制学习---分流电阻采样及重构
  • 2:点云处理—3D相机开发
  • 追踪大型语言模型的思想(上)(来自针对Claude的分析)
  • 鸿蒙开发——1.ArkTS声明式开发(UI范式基本语法)
  • ClimateCatcher专用CDS配置教程
  • 如何在自己的服务器上部署静态网页并通过IP地址进行访问
  • 电池管理系统BMS三级架构——BMU、BCU和BAU详解
  • 前端面试测试题目(一)
  • 密码学系列 - SR25519与ED25519
  • English of Root for May 7th
  • C++ 日志系统实战第四步:设计与代码实现详解
  • Vivo 手机官网交互效果实现解析
  • 【ASP.net】在Windows 11上安装IIS并测试C# Web项目的踩坑实录
  • vue3+ts的computed属性怎么用?
  • css animation 动画属性
  • 基于大模型的子宫平滑肌瘤全周期预测与诊疗方案研究
  • 细究Java三大特性之封装、继承、多态
  • 印方称所有敌对行动均得到反击和回应,不会升级冲突
  • 乘客被地铁厕所门砸伤,南京地铁:突然坏的,已和乘客沟通处理
  • 第三届“老山国际春茶节”活动在云南麻栗坡举办
  • 央行:下阶段将实施好适度宽松的货币政策
  • 丹麦召见美外交官,强调“不能容忍”美在格陵兰岛间谍活动
  • 大四本科生已发14篇SCI论文?重庆大学:成立工作组核实