iis服务器助手广告广告
返回顶部
首页 > 资讯 > 后端开发 > Python >python过滤 Kubernetes api数据
  • 780
分享到

python过滤 Kubernetes api数据

数据pythonKubernetes 2023-01-31 08:01:52 780人浏览 泡泡鱼

Python 官方文档:入门教程 => 点击学习

摘要

kubernetes endpoints api地址Http://ip地址:端口/api/v1/namespaces/default/endpointsservices api地址http://ip地址:端口/api/v1/nam

kubernetes endpoints api地址

Http://ip地址:端口/api/v1/namespaces/default/endpoints

services api地址

http://ip地址:端口/api/v1/namespaces/default/services

下面主要展示 endpoints api的部分数据

{
    "kind": "EndpointsList",
    "apiVersion": "v1",
    "metadata": {
        "selflink": "/api/v1/namespaces/default/endpoints",
        "resourceVersion": "9715086"
    },
    "items": [{
        "metadata": {
            "name": "voucher-center-master",
            "namespace": "default",
            "selfLink": "/api/v1/namespaces/default/endpoints/voucher-center-master",
            "uid": "8fd980bf-0507-11e9-a3b3-005056bb4630",
            "resourceVersion": "9051672",
            "creationTimestamp": "2018-12-21T10:02:44Z"
        },
        "subsets": [
            {
                "addresses": [
                    {
                        "ip": "192.169.167.105",
                        "nodeName": "job-node149",
                        "targetRef": {
                            "kind": "Pod",
                            "namespace": "default",
                            "name": "voucher-center-rc-p20kk",
                            "uid": "76dd6355-1269-11e9-95a3-005056bb4630",
                            "resourceVersion": "9051584"
                        }
                    },
                    {
                        "ip": "192.169.183.26",
                        "nodeName": "job-node137",
                        "targetRef": {
                            "kind": "Pod",
                            "namespace": "default",
                            "name": "voucher-center-rc-vknkt",
                            "uid": "7751e013-1269-11e9-95a3-005056bb4630",
                            "resourceVersion": "9051604"
                        }
                    },
                    {
                        "ip": "192.169.242.29",
                        "nodeName": "job-node145",
                        "targetRef": {
                            "kind": "Pod",
                            "namespace": "default",
                            "name": "voucher-center-rc-0x482",
                            "uid": "7790169d-1269-11e9-95a3-005056bb4630",
                            "resourceVersion": "9051627"
                        }
                    },
                    {
                        "ip": "192.169.76.159",
                        "nodeName": "job-node151",
                        "targetRef": {
                            "kind": "Pod",
                            "namespace": "default",
                            "name": "voucher-center-rc-xtxfb",
                            "uid": "771842c8-1269-11e9-95a3-005056bb4630",
                            "resourceVersion": "9051577"
                        }
                    },
                    {
                        "ip": "192.169.98.159",
                        "nodeName": "job-node147",
                        "targetRef": {
                            "kind": "Pod",
                            "namespace": "default",
                            "name": "voucher-center-rc-n9wkl",
                            "uid": "77cb9ffc-1269-11e9-95a3-005056bb4630",
                            "resourceVersion": "9051637"
                        }
                    }
                ],
                "ports": [
                    {
                        "name": "beejob-3011",
                        "port": 3011,
                        "protocol": "tcp"
                    },
                    {
                        "name": "server-30012",
                        "port": 8012,
                        "protocol": "TCP"
                    }
                ]
            }
        ]
    }, ]
}

 

需要提取以下数据

items-->metadata-->name
items-->subsets-->addresses-->ip
items-->subsets-->addresses-->nodeName
items-->subsets-->addresses-->targetRef-->name
items-->subsets-->ports-->port
items-->subsets-->ports-->port

 

在应用的yaml文件中,定义了2个端口

apiVersion: v1
kind: Service
metadata:
  name: voucher-center-master
  namespace: xx
spec:
  type: NodePort
  ports:
    - port: 8012
      targetPort: 8012
      protocol: TCP
      nodePort: 31012
      name: server-31012
    - port: 3011
      targetPort: 3011
      protocol: TCP
      name: beejob-3011
  selector:
    name: voucher-center

 

一个是server-port,一个是beejob-port

我需要对server-port和beejob-port做健康检测!

上面的api需要提取6个字段信息,最终的数据结构如下:

{
    "voucher-center-master":[
        {
            "ip":"192.169.167.105",
            "nodeName":"job-node149",
            "pod_name":"voucher-center-rc-p20kk",
            "server_port":"8012",
            "beejob_port":"3101",
        },
        {
            "ip":"192.169.183.26",
            "nodeName":"job-node137",
            "pod_name":"voucher-center-rc-vknkt",
            "server_port":"8012",
            "beejob_port":"3101",
        },
        ...
    ],
}

 

其中 pod_name 对应 items-->subsets-->addresses-->targetRef-->name

server_port 对应 items-->subsets-->ports-->port  注意:ports里面的name必须是以server开头的

beejob_port 对应 items-->subsets-->ports-->port  注意:ports里面的name必须是以beejob开头的

 

#!/usr/bin/env python3coding: utf-8
import sys
import JSON
import Socket
import ipaddress
import requests

"""
要求的数据格式
beejob_port是动态的,存在即有
{
    "voucher-center-master":[
        {
            "ip":"192.169.167.105",
            "nodeName":"job-node149",
            "pod_name":"voucher-center-rc-p20kk",
            "server_port":"8012",
            "beejob_port":"3101",
        },
        {
            "ip":"192.169.183.26",
            "nodeName":"job-node137",
            "pod_name":"voucher-center-rc-vknkt",
            "server_port":"8012",
            "beejob_port":"3101",
        },
        ...
    ],
}
"""


class Endpoints(object):
    def __init__(self, ip, port):
        self.ip = ip
        self.port = port

    def check_tcp(self, ip, port, timeout=1):
        """
        检测tcp端口
        :param ip: ip地址
        :param port: 端口号
        :param timeout: 超时时间
        :return: bool
        """
        flag = False
        try:
            socket.setdefaulttimeout(timeout)  # 整个socket层设置超时时间
            cs = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
            address = (str(ip), int(port))
            status = cs.connect_ex((address))  # 开始连接
            cs.settimeout(timeout)

            if not status:
                flag = True

            return flag
        except Exception as e:
            print("error:%s" % e)
            return flag

    def valid_ip(self, ip):
        """
        验证ip是否有效,比如192.168.1.256是一个不存在的ip
        :return: bool
        """
        try:
            # 判断 python 版本
            if sys.version_info[0] == 2:
                ipaddress.ip_address(ip.strip().decode("utf-8"))
            elif sys.version_info[0] == 3:
                # ipaddress.ip_address(bytes(ip.strip().encode("utf-8")))
                ipaddress.ip_address(ip)

            return True
        except Exception as e:
            print(e)
            return False


    def main(self):
        """
        主程序
        :return: json
        """
        valid_ip = self.valid_ip(self.ip)
        if not valid_ip:
            return "%s ip不合法" % self.ip

        check_tcp = self.check_tcp(self.ip,self.port)
        if not check_tcp:
            return "%s 端口不可达" % self.port

        # 需要访问的url
        url = "http://{}:{}/api/v1/namespaces/default/endpoints".fORMat(self.ip, self.port)

        response = requests.get(url, )  # get请求地址
        content = (response.content).decode('utf-8')  # 二进制转换为字符串
        dic = json.loads(content)  # 反序列化成字典
        # print(dic,type(dic))

        filter_dic = {}  # 筛选结果

        for i in dic['items']:
            if not filter_dic.get(i['metadata']['name']):  # 判断name是否存在
                filter_dic[i['metadata']['name']] = []  # 初始化列表

            if i.get('subsets'):  # 判断subsets是否存在
                for j in i['subsets']:
                    for k in j['addresses']:  # 遍历字典
                        filter_dic[i['metadata']['name']].append({})  # 添加空字典
                        for m in filter_dic[i['metadata']['name']]:  # 遍历列表
                            if not m.get('ip'):
                                # print("-->ip:",k['ip'])
                                # 设置ip地址
                                m['ip'] = k['ip']

                            if k.get('nodeName'):
                                # print("-->nodeName:", k['nodeName'])
                                if not m.get('nodeName'):
                                    # 设置nodeName
                                    m['nodeName'] = k['nodeName']

                            if k.get('targetRef'):
                                if not m.get('pod_name'):
                                    # 设置pod_name
                                    m['pod_name'] = k['targetRef']['name']

                    for ports in j['ports']:
                        if ports.get('name'):  # 判断键值存在时
                            # 遍历字典
                            for m in filter_dic[i['metadata']['name']]:
                                # 判断name值以server开头时
                                if ports['name'].startswith('server'):
                                    if not m.get('server_port'):
                                        # 增加键值对
                                        m['server_port'] = ports['port']
                                if ports['name'].startswith('beejob'):
                                    if not m.get('beejob_port'):
                                        m['beejob_port'] = ports['port']

        # print(filter_dic)
        # print(json.dumps(filter_dic))
        return json.dumps(filter_dic)


if __name__ == '__main__':
    # 参数个数,由于sys.argv[0]就是脚本名,所以要减1
    num = len(sys.argv) - 1
    if num < 2 or num > 2:
        print("参数错误,必须传2个参数,分别是ip和端口")
        print("比如:Python endpoints_v1.py 192.168.1.1 8080")
        exit()

    ip = sys.argv[1]  # ip
    port = sys.argv[2]  # 端口

    # ip = "192.168.1.1"
    # port = "8080"
    res = Endpoints(ip, port).main()
    print(res)


执行输出:

{"voucher-center-master":[{"server_port":8012,"ip":"192.169.167.105","pod_name":"voucher-center-rc-p20kk","nodeName":"job-node149","beejob_port":3011},{"server_port":8012,"ip":"192.169.183. 26","pod_name":"voucher-center-rc-vknkt","nodeName":"job-node137","beejob_port":3011},{"server_port":8012,"ip":"192.169.242.29","pod_name":"voucher-center-rc-0x482","nodeName":"job-node145","beejob_port":3011},{"server_port":8012,"ip":"192.169.76.159","pod_name":"voucher-center-rc-xtxfb","nodeName":"job-node151","beejob_port":3011},{"server_port":8012,"ip":"192.169.98.159","pod_name":"voucher-center-rc-n9wkl","nodeName":"job-node147","beejob_port":3011}]}

 

使用json格式化工具,效果如下:

1.png

 

那么有了这些数据,就可以做端口的健康检测了!

 


--结束END--

本文标题: python过滤 Kubernetes api数据

本文链接: https://www.lsjlt.com/news/193550.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • python过滤 Kubernetes api数据
    Kubernetes endpoints api地址http://ip地址:端口/api/v1/namespaces/default/endpointsservices api地址http://ip地址:端口/api/v1/nam...
    99+
    2023-01-31
    数据 python Kubernetes
  • python怎么过滤出想要的数据
    在Python中,可以使用多种方法来过滤出想要的数据。下面是一些常用的方法:1. 使用列表推导式:列表推导式是一种简洁的方式来生成列...
    99+
    2023-09-29
    python
  • MySQL 过滤重复数据
    方法1:加关键字 DISTINCT 在mysql中,可以利用“SELECT”语句和“DISTINCT”关键字来进行去重查询,过滤掉重复的数据,语法“SELECT DISTINCT 字段名 ...
    99+
    2023-09-09
    mysql 数据库 sql kubernetes 面试
  • PHP数据过滤函数详解:filter_var、filter_input、filter_has_var等函数的数据过滤技巧
    PHP数据过滤函数详解:filter_var、filter_input、filter_has_var等函数的数据过滤技巧,需要具体代码示例在 Web 开发中,数据过滤是非常重要的一环。过滤用户输入的数据可以保护我们的应用程序免受潜在的安全威...
    99+
    2023-11-18
    数据过滤 filter_input filter_var 数据过滤函数的关键词:PHP filter_has_var
  • python 数据清洗之数据合并、转换、过滤、排序
    前面我们用pandas做了一些基本的操作,接下来进一步了解数据的操作, 数据清洗一直是数据分析中极为重要的一个环节。 数据合并 在pandas中可以通过merge对数据进行合并操作。 import nu...
    99+
    2022-06-04
    数据 python
  • mysql过滤重复数据-select
    一、mysql过滤重复数据-distinct关键字  select distinct type from table;   注: distinct 只能在select 语句中使用 如使用distinct对多个关键字...
    99+
    2023-09-06
    mysql 数据库 sql
  • Python根据过滤器拆分列表
    目录1. bifurcate2. enumerate3. 列表推导式1. bifurcate def bifurcate(lst, filter): return [ ...
    99+
    2022-11-12
  • MySQL必知必会---过滤数据
    1.使用where子句2.where子句操作符2.1 检查单个值2.2 不匹配检查2.3 范围值检查2.4 空值检查 使用where子句数据库表一般包含大量的数据,很少需要检...
    99+
    2022-10-18
  • MySQL怎么过滤重复数据
    本篇内容主要讲解“MySQL怎么过滤重复数据”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“MySQL怎么过滤重复数据”吧!方法1:加关键字 DISTINCT在mysql中,可以利用“SELEC&...
    99+
    2023-07-06
  • python如何使用Filter()过滤函数
    小编给大家分享一下python如何使用Filter()过滤函数,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧! Filter()过滤函数filter()函...
    99+
    2023-06-27
  • Java整合mybatis实现过滤数据
    目录场景例子执行流程配置切面方案实现场景 权限1:只能看到自己创建的数据权限2:只能看到本部门的数据权限3:查看全部数据 例子 小明有权限1: { "code": "200"...
    99+
    2023-01-14
    Java mybatis过滤数据 Java 过滤数据
  • PHP中怎么实现数据过滤
    本篇文章给大家分享的是有关PHP中怎么实现数据过滤,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。PHP数据过滤调度方法这种方法是用一个单一的PHP脚本调度(通过 URL)。其他...
    99+
    2023-06-17
  • Python匿名函数/排序函数/过滤函数
    一. lamda匿名函数   为了解决一些简单的需求而设计的一句话函数 # 计算n的n次方 def func(n): return n**n print(func(10)) f = lambda n: n**n print(f(...
    99+
    2023-01-31
    函数 Python
  • python如何使用filter函数过滤值
    这篇文章主要介绍了python如何使用filter函数过滤值,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。使用filter函数过滤值filter函数用于过滤可迭代对象中的某些...
    99+
    2023-06-27
  • 通过python 获取股票数据的API接口
    (一)获取当前 K线 对应时间的时间戳函数ContextInfo.get_ bar_timetag() 用法: ContextInfo.get_bar_timetag (index)。 释义:获取当前K线对应时间的时间戳。 参数:numbe...
    99+
    2023-09-12
    python 金融
  • perl如何过滤文件中的数据
    在Perl中,可以使用正则表达式或者内置的字符串函数来过滤文件中的数据。以下是两种常见的方法:1. 使用正则表达式过滤数据:```p...
    99+
    2023-10-07
    perl
  • 【MySQL】一文带你了解过滤数据
    🎬 博客主页:博主链接 🎥 本文由 M malloc 原创,首发于 CSDN🙉 🎄 学习专栏推荐:LeetCode刷题集! ...
    99+
    2023-09-27
    mysql 数据库 sql
  • wireshark怎么过滤udp协议的数据
    要过滤UDP协议的数据,在Wireshark的过滤表达式中使用"udp"关键字即可。以下是一些在Wireshark中过滤UDP数据的...
    99+
    2023-09-20
    wireshark
  • MySQL过滤数据操作方法梳理
    目录前言1. where 字句的使用2. where 字句操作符2.1 检查单个值2.2 不匹配检查2.3 范围值检查2.4 空值检查3. 扩展3.1 SQL过滤与应用过滤3.2 引号的使用3.3 N...
    99+
    2022-10-21
  • SQL实现数据过滤流程详解
    目录数据准备student 表过滤数据过滤单个值过滤null 值过滤集合BETWEEN IN NOT IN使用通配符过滤数据LIKE使用逻辑操作符组合WHERE子句数据准备student 表 CREATE TAB...
    99+
    2023-01-05
    SQL数据过滤 SQL过滤语句
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作