当前位置: 首页 > news >正文

Hadoop-HA集群部署

集群的服务器规划:

配置免密登陆:(这里示范的是第一台服务器,其余的操作一样),免密登陆是为了执行脚本统一操作,启动,如(hdfs集群:1上启动2.5.6.7)(yarn,3上启动4567)

免密登陆测试:从01服务器登陆05服务器:

ZOOKEEPER的配置自己去看前面的文章,装到(5.6.7)三台服务器上去

在6.7两台服务器上修改myid为2和3.这样你的 3台zk就都配置好了

启动zk,并且查看状态是否正常:

安装配置hadoop集群

1.如上图:两台hdfs的nameservice我将他们和在一起命名——ns1

2.指定hadoop的目录

3.指定zookeeper的集群地址

以上就已经将namenode的配置配好了

以下是日志的配置JournalNode,和zkfc的自动切换

配置mapreduce的框架为yarn

配置yarn的高可用

将1上的hadoop包拷贝到2.3.4.5.6.7

启动

测试yarn地址是 

相关文章:

  • AI刷题-多零件流水线优化问题
  • vue 判断一个属性值,如果是null或者空字符串或者是空格没有值的情况下,赋值为--
  • 【并发压测】高并发下Linux流量监控
  • TensorFlow 概念
  • 第五章 起航12 实习的小鸽飞了
  • 【RK3588嵌入式图形编程】-SDL2-构建模块化UI
  • istio介绍补充以及使用篇
  • 美团MTSQL特性解析:技术深度与应用广度的完美结合
  • Jmeter进阶篇(34)如何解决jmeter.save.saveservice.timestamp_format=ms报错?
  • 对学习编程语言的一些理解
  • Linux:文件(二)
  • flutter将utf-8编码的字节序列转换为中英文字符串
  • STL —— 洛谷字符串(string库)入门题(蓝桥杯题目训练)(二)
  • FreeRTOS学习笔记
  • Ubuntu 的RabbitMQ安装
  • Spring Boot项目中解决跨域问题(四种方式)
  • 使用WebStorm开发Vue3项目
  • AI大模型有哪些常见的应用场景
  • MySQL如何解决幻读?
  • 【git-hub项目:YOLOs-CPP】本地实现05:项目移植
  • 上海这个咖啡文化节首次“走出去”,率本土品牌亮相英国伦敦
  • 浙江一家长称小学老师打孩子还威胁要从3楼扔下,当地警方已立案
  • 新任重庆市垫江县委副书记刘振已任县政府党组书记
  • 纪念|脖子上挂着红领巾的陈逸飞
  • 俄媒:俄乌代表团抵达谈判会场
  • 马上评|训斥打骂女儿致死,无暴力应是“管教”底线