当前位置: 首页 > news >正文

Ambari 中移除/重装 yarn 集群中的 NodeManager 节点

文章目录

  • 背景
  • 分析
  • 解决
    • 分析:现有 NodeManager 情况
    • 移除:240 服务器上的 NodeManager
    • 重新安装:240 服务器上的安装 NodeManager
  • 疑问
    • 为什么直接添加就可以运行?
  • 参考

背景

项目中有Spark应用,主要在 yarn 集群中部署。

现在发现 yarn 集群中的节点资源过剩,需要将部分节点移除,以释放出服务器资源

分析

🚀 项目是使用 Ambari 来搭建的 yarn 集群,所以也可以通过 Ambari 页面来操作。

😁 主要思路:

1、停掉 yarn 集群中提交的 spark 应用

2、操作 Ambari 停止要释放的服务器节点上的 NodeManager,并删除 NodeManager

3、启动 spark 应用,验证集群是否正常可用

解决

分析:现有 NodeManager 情况

从 Ambari 中可以看到,当前的 NodeManager 节点共有7个:

单击“NodeManagers”,可以看到在如下7台服务上:

相关文章:

  • YOLOv11检测模型数据集介绍、模型训练及测试
  • LeeCode912. 排序数组
  • AUTOSAR图解==>AUTOSAR_SWS_CryptoInterface
  • 神经接口安全攻防:从技术漏洞到伦理挑战
  • 不一样的flag 1(迷宫题)
  • 【专题刷题】双指针(四):最接近的三数之和,接雨水
  • 关于防火墙
  • Python读取Excel表格数据并写成JSON格式文件(精简版)
  • Zookeeper 概述
  • 【SAP ME 42】SAP ME 性能改进
  • LIMS引领综合质检中心数字化变革,赋能质量强国战略
  • 单线服务器有什么优点
  • Vue3 实战:打造多功能旅游攻略选项卡页面
  • 大模型转换为 GGUF 以及使 用 ollama 运行
  • Maven 简介(图文)
  • 幽灵依赖与常见依赖管理
  • ObjectOutputStream 深度解析
  • 2025年03月中国电子学会青少年软件编程(Python)等级考试试卷(三级)答案 + 解析
  • AI测试用例生成平台
  • uni.createInnerAudioContext踩坑duration在真机环境一直为0
  • 英国地方选举结果揭晓,工党保守党皆受挫
  • 今年4月上海一二手房成交面积同比增21%,二手房成交2.07万套
  • 停电催生商机,中国品牌 “照亮” 西班牙
  • 世界黄金协会:一季度全球黄金投资需求同比增170%
  • 看展览|建造上海:1949年以来的建筑、城市与文化
  • 国家税务总局:“二套转首套”可以享受贷款利息个税专项扣除