当前位置: 首页 > news >正文

yarn任务筛选spark任务,判断内存/CPU使用超过限制任务

yarn任务筛选spark任务,判断内存/CPU使用超过限制任务

curl -s “http://it-cdh-node01:8088/ws/v1/cluster/apps?states=RUNNING” | jq ‘select(.apps.app[].applicationType = “SPARK”) | .apps.app[].id’ | xargs -I {} curl -s “http://it-cdh-node01:8088/ws/v1/cluster/apps/{}” | jq ‘select(.app.allocatedMB >= 102400 or .app.allocatedVCores >= 50) | .app.id, .app.name, .app.allocatedMB, .app.allocatedVCores’

http://www.dtcms.com/a/191785.html

相关文章:

  • 语音识别——语音转文字
  • C++ 在 Windows 和 Linux 平台上的开发差异及常见问题
  • Java详解RabbitMQ工作模式之发布订阅模式
  • 拉取sset docker镜像
  • Dify与n8n全面对比指南:AI应用开发与工作流自动化平台选择【2025最新】
  • 冲刺软考:做减法,走出备考迷茫,高效提分!
  • 乘法口诀练习神器
  • 【杂谈】-AI 重塑体育营销:从内容管理到创意释放的全面变革
  • 激光雷达视觉定位是3D视觉定位吗?
  • 云上玩转 Qwen3 系列之三:PAI-LangStudio x Hologres构建ChatBI数据分析Agent应用
  • 《C++ vector详解》
  • 【软件工具】基于PDF文件内容识别的改名软件,PDF根据内容自动重命名,如何识别pdf内容并做文件命名,PDF批量改名
  • 费曼技巧实践
  • 数据库--处理模型(Processing Model)(二)
  • undefined reference to `typeinfo for DeviceAllocator‘
  • 西瓜书【机器学习(周志华)】目录
  • 鸿蒙OSUniApp 开发的一键分享功能#三方框架 #Uniapp
  • 深度学习、机器学习及强化学习的联系与区别
  • 实现可靠的 WebSocket 连接:心跳与自动重连的最佳实践
  • 机器学习——朴素贝叶斯练习题
  • 实用工具:微软软件PowerToys(完全免费),实现多台电脑共享鼠标和键盘(支持window系统)
  • 机器学习 day03
  • ARP Detection MAC-Address Static
  • 机器学习08-损失函数
  • 论文学习_Precise and Accurate Patch Presence Test for Binaries
  • CodeEdit:macOS上一款可以让Xcode退休的IDE
  • RabbitMQ最新入门教程
  • 考研408《计算机组成原理》复习笔记,第二章(2)数值数据的表示和运算(浮点数篇)
  • AI智能分析网关V4工服检测算法:工厂车间着装规范管理的智能化解决方案
  • 趣味编程:钟表