当前位置: 首页 > news >正文

Ambari 中移除/重装 yarn 集群中的 NodeManager 节点

文章目录

  • 背景
  • 分析
  • 解决
    • 分析:现有 NodeManager 情况
    • 移除:240 服务器上的 NodeManager
    • 重新安装:240 服务器上的安装 NodeManager
  • 疑问
    • 为什么直接添加就可以运行?
  • 参考

背景

项目中有Spark应用,主要在 yarn 集群中部署。

现在发现 yarn 集群中的节点资源过剩,需要将部分节点移除,以释放出服务器资源

分析

🚀 项目是使用 Ambari 来搭建的 yarn 集群,所以也可以通过 Ambari 页面来操作。

😁 主要思路:

1、停掉 yarn 集群中提交的 spark 应用

2、操作 Ambari 停止要释放的服务器节点上的 NodeManager,并删除 NodeManager

3、启动 spark 应用,验证集群是否正常可用

解决

分析:现有 NodeManager 情况

从 Ambari 中可以看到,当前的 NodeManager 节点共有7个:

单击“NodeManagers”,可以看到在如下7台服务上:

http://www.dtcms.com/a/142021.html

相关文章:

  • YOLOv11检测模型数据集介绍、模型训练及测试
  • LeeCode912. 排序数组
  • AUTOSAR图解==>AUTOSAR_SWS_CryptoInterface
  • 神经接口安全攻防:从技术漏洞到伦理挑战
  • 不一样的flag 1(迷宫题)
  • 【专题刷题】双指针(四):最接近的三数之和,接雨水
  • 关于防火墙
  • Python读取Excel表格数据并写成JSON格式文件(精简版)
  • Zookeeper 概述
  • 【SAP ME 42】SAP ME 性能改进
  • LIMS引领综合质检中心数字化变革,赋能质量强国战略
  • 单线服务器有什么优点
  • Vue3 实战:打造多功能旅游攻略选项卡页面
  • 大模型转换为 GGUF 以及使 用 ollama 运行
  • Maven 简介(图文)
  • 幽灵依赖与常见依赖管理
  • ObjectOutputStream 深度解析
  • 2025年03月中国电子学会青少年软件编程(Python)等级考试试卷(三级)答案 + 解析
  • AI测试用例生成平台
  • uni.createInnerAudioContext踩坑duration在真机环境一直为0
  • PostgreSQL 通过 copy 命令导入几何数据 及 通过 CopyManager.copyIn() 导入几何数据
  • PH热榜 | 2025-04-18
  • 视频孪生技术赋能城市内涝灾害智慧化建设
  • 直播人脸美型核心技术详解:卷积神经网络与图像增强在美颜SDK中的应用
  • 什么是爬虫?——从技术原理到现实应用的全面解析
  • STM32F7安全库各版本发布内容的表格化中文总结
  • C++——C++11常用语法总结
  • CentOS 7系统yum报错解决方案(CentOS 7官方EOL问题修复)
  • 使用droidrun库实现AI控制安卓手机
  • Python读取Excel表数据转为JSON格式文件(详细优化版)