美文网首页
hdfs和yarn的主备查询命令

hdfs和yarn的主备查询命令

作者: wind_103 | 来源:发表于2020-12-06 22:24 被阅读0次

一、hdfs的主备查看:

hdfs haadmin -getServiceState nn1

hdfs haadmin -getServiceState  nn2

如果不是nn1和nn2,则可以查看/etc/hadoop/conf.cloudera.hdfs/hdfs-site.xml中的dfs.ha.namenodes.sdg参数值

二、resourcemanager的主备查看

yarn rmadmin -getServiceState rm1

yarn rmadmin -getServiceState rm2

如果不是rm1和rm2,则可以查看/etc/hadoop/conf.cloudera.yarn/yarn-site.xml文件中的yarn.resourcemanager.ha.rm-ids参数值

三、批量Kill yarn 任务

删除处于ACCEPTED状态的任务:

for i in  `yarn application  -list | grep -w  ACCEPTED | awk '{print $1}' | grep application_`; do yarn  application -kill $i; done

相关文章

  • hdfs和yarn的主备查询命令

    一、hdfs的主备查看: hdfs haadmin -getServiceState nn1 hdfs haadm...

  • 13-Hadoop高级

    Hadoop的HDFS HA、Yarn HA集群部署 1.HDFS NN SNN(secondary) 热备 NN...

  • hadoop-初识五(常用命令)

    hdfs dfs等价于hadoop fs 1、查询命令 查看根目录下所有文件和目录 $hdfs dfs -ls /...

  • HDFS基本使用

    HDFS 指令 通常需要在LINUX控制台查询HDFS相关信息,此时就需要使用到HDFS相关命令。 dfs相关命令...

  • Hadoop- yarn notes

    Yarn基础架构 1 YARN产生背景 最早的hadoop是由hdfs和mr组成的,hdfs负责存储,mr负责计算...

  • 大数据生态系统

    hadoop里面可分为HDFS和mapreduce和yarn HDFS(Hadoop Distributed Fi...

  • MapReduce

    HDFS与YARN的关系HDFS与YARN.png Map与Reduce MapReduce架构 shuffle ...

  • Mysql主从配置

    mysql主备配置的时候,这时主添加数据,备库未更新,这时有查询进来,查询到了备库。如何解决。可以sql语句强行走...

  • 15.5 hive所依赖的集群服务&hive的beeli

    hive依赖hbase和yarn,hbase用于数据存储,yarn用于执行sql任务hbase依赖hdfs。hba...

  • Spark-on-yarn遇到的Java crash问题

    问题描述 配置好Hadoop集群(包括hdfs和yarn),配置好spark-on-yarn,提交任务后发现con...

网友评论

      本文标题:hdfs和yarn的主备查询命令

      本文链接:https://www.haomeiwen.com/subject/hgvawktx.html