k8s集群状态与日志查看

红米4个月前技术文章249

一、状态查看

1. 查看 Pod 状态以及运行节点

kubectl get pods -o widekubectl -n kube-system get pods -o wide

2. 查看 Pod 事件

kubectl describe pod <pod-name>

3. 查看 Node 状态

kubectl get nodes
kubectl describe node <node-name>

二、日志查看

1. kube-apiserver 日志

PODNAME=$(kubectl -n kube-system get pod -l component=kube-apiserver -o
jsonpath=‘{.items[0].metadata.name}’)
kubectl -n kube-system logs $PODNAME --tail 100

以上命令操作假设控制平面以 Kubernetes 静态 Pod 的形式来运行。如果kube-apiserver 是用 systemd 管理的,则需要登录到 master 节点上,然后使用
journalctl -u kube-apiserver 查看其日志。

2. kube-controller-manager 日志

PODNAME=$(kubectl -n kube-system get pod -l
component=kube-controller-manager -o jsonpath=‘{.items[0].metadata.name}’)
kubectl -n kube-system logs $PODNAME --tail 100

以上命令操作假设控制平面以 Kubernetes 静态 Pod 的形式来运行。如果kube-controller-manager 是用 systemd 管理的,则需要登录到 master节点上,然后使用 journalctl -u kube-controller-manager 查看其日志。

3. kube-scheduler 日志

PODNAME=$(kubectl -n kube-system get pod -l component=kube-scheduler -o
jsonpath=‘{.items[0].metadata.name}’)
kubectl -n kube-system logs $PODNAME --tail 100

以上命令操作假设控制平面以 Kubernetes 静态 Pod 的形式来运行。如果kube-scheduler 是用 systemd 管理的,则需要登录到 master 节点上,然后使用journalctl -u kube-scheduler 查看其日志。

4. kube-dns 日志

kube-dns 通常以 Addon 的方式部署,每个 Pod 包含三个容器,最关键的是 kubedns容器的日志:

PODNAME=$(kubectl -n kube-system get pod -l k8s-app=kube-dns \
 -ojsonpath=‘{.items[0].metadata.name}’)kubectl -n kube-system logs $PODNAME -c kubedns

5. Kubelet 日志

Kubelet 通常以 systemd 管理。查看 Kubelet 日志需要首先 SSH 登录到 Node上,推荐使用 kubectl-node-shell而不是为每个节点分配公网 IP 地址。比如:

[root@localhost ~]# cat kubectl-node_shell#!/bin/shif [ -z "$1" ]; then
  echo "Please specify node name"
  exit 1fiNODE="$1"IMAGE="alpine"POD="nsenter-$(env LC_CTYPE=C tr -dc a-z0-9 < /dev/urandom | head -c 6)"NAMESPACE=""# Check the nodekubectl get node "$NODE" >/dev/null || exit 1
OVERRIDES="$(cat <<EOT
{  "spec": {    "nodeName": "$NODE",    "hostPID": true,    "containers": [
      {        "securityContext": {          "privileged": true
        },        "image": "$IMAGE",        "name": "nsenter",        "stdin": true,        "stdinOnce": true,        "tty": true,        "command": [ "nsenter", "--target", "1", "--mount", "--uts", "--ipc", "--net", "--pid", "--", "bash", "-l" ]
      }
    ]
  }
}
EOT
)"echo "spawning \"$POD\" on \"$NODE\""kubectl run --namespace "$NAMESPACE" --rm --image alpine --overrides="$OVERRIDES" --generator=run-pod/v1 -ti "$POD"chmod +x ./kubectl-node_shell
sudo mv ./kubectl-node-shell /usr/local/bin/kubectl-node_shell
[root@localhost ~]# ./kubectl-node_shell localhost.localdomainspawning "nsenter-i71opm" on "localhost.localdomain"If you don't see a command prompt, try pressing enter.
[root@localhost /]# journalctl -l -u kubele

6. Kube-proxy 日志

Kube-proxy 通常以 DaemonSet 的方式部署,可以直接用 kubectl 查询其日志

$ kubectl -n kube-system get pod -l component=kube-proxy
NAME READY STATUS RESTARTS AGE
kube-proxy-42zpn 1/1 Running 0 1d
kube-proxy-7gd4p 1/1 Running 0 3d
kube-proxy-87dbs 1/1 Running 0 4d
$ kubectl -n kube-system logs kube-proxy-42zpn

相关文章

Redis 主从同步

Redis 主从同步

前言在分布式系统中为了解决单点问题,通常会把数据复制到多个副本部署到其它机器,满足故障恢复和负载均衡需求。Redis 也提供了复制功能,实现相同数据多个 Redis 副本。本篇文章介绍如何配置 Red...

MySQL排障实战(一)—— 连接异常中断

MySQL排障实战(一)—— 连接异常中断

问题背景数栈数据质量模块,接入客户的数据源后,一执行就报错。报错信息:{"logInfo": {{"jobid":"1a4ebbbd&quo...

Containerd OCI runtime create failed

Containerd OCI runtime create failed

1、背景Kubernetes 集群新增 worker 节点(centos7、containerd),发现容器一直启动不起来。2、报错信息经查看系统 message 日志发现如下报错信息:rpc err...

ES运维(七)添加sql插件

ES运维(七)添加sql插件

一、概述ElasticSearch安装SQL插件下载地址(中国大佬开发)二、集成sql插件1、下载es-sql插件下载地址: https://github.com/NLPchina/elastics...

Hbase&Hive区别对比

Hbase和Hive定义区别Hbase,其实是Hadoop database的简称,是一种NoSQL数据库,主要适用于海量明细数据(十亿、百亿)的随机实时查询,如日志明细、交易清单、轨迹行为等。Hiv...

EMR 配置 Hive on Spark

EMR 配置 Hive on Spark

Hive3 on spark 集成前置条件hadoop yarn环境正常oracle jdk 1.8版本1、spark2 下载准备https://archive.apache.org/dist/spa...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。