flink获取taskmanager的pstree信息

南墨2年前技术文章554

使用pstree –p 进程号 的方式能够获取taskmanagerpstree信息,这个地方提供一个收集脚本。内容如下:

#!/bin/bash

searchPID() {

   local pids=`ps -ef | grep taskmanager | grep -v grep | grep -v "bash -c" | grep -v taskmanagerSearch.sh | awk '{print $2}'`;  

 time=$(date "+%Y-%m-%d %H:%M:%S")

 echo "checktime is  --------------------- $time" >> /var/log/Bigdata/taskManagerTree.log

  for i in $pids

    do

       local treeNum=$(pstree -p $i | wc -l)

       echo "$i 's pstree num is $treeNum" >> /var/log/Bigdata/taskManagerTree.log

    done

}

searchPID

功能为:获取节点上所有taskmanager pstree的数量,打印结果如下:

1.png

相关文章

Flink window详解

Flink window详解

一、窗口(window)一般真实的流都是无界的,如果是无界怎样处理无界的数据可以把无限的数据流进行切分,得到有限的数据集进行处理 —— 也 就是得到有界流 窗口(window)就是将无限流切割为有限流...

Trino对接haproxy开启ssl

Trino对接haproxy开启ssl

1、背景客户在开启https后,在高并发的情况下,集群性能下降严重。初步估计是由于worker和Coordinator交互都需要进行加密和解密,会提高cpu使用率,导致服务变慢。现在采用haproxy...

Kafka性能维度标准

如何判断一个kafka集群是否已经处于性能瓶颈,通常的判断条件有如下几点:维度1:磁盘IO读写磁盘性能是kafka重要的参数指标,如果磁盘IO到达性能瓶颈会直接导致业务故障。Kafka读写性能跟磁盘I...

Hue添加Impala数据源

Hue添加Impala数据源

一、前言使用Hue操作impala进行查询。二、修改Hue配置1.在CM页面选择Hue,点击配置,找到Impala服务将服务范围勾选为Impala2.在hue_safety_valve.ini 的Hu...

DBMS_SYSTEM跟踪10046

SET_SQL_TRACE_IN_SESSION只能设置level 1的10046事件--启用level 1 Trace EXEC SYS.DBMS_SYSTEM.SET_SQL_TRACE_IN_...

大数据集群部署规划(三)节点选配方案

节点部署原则适用场景组网规则管理节点、控制节点和数据节点分开部署(此方案至少需要8个节点,manager为部署商业化大数据集群时所需例如:hdp,cdh等)core × 11 + worker × n...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。