目前很多公司业务已经上云,使用了大量的云主机。当前大多数云厂商的云主机公网都是采用的eip,也就是内网和外网使用的同一张网卡,所以流量全部经过的同一个网卡。然而这就面临一个问题,如何将公网和私网的流量分开统计呢?特别是当机器流量异常的时候,如何快速的判断流量是来自公网还是私网。当然云厂商一般也提供了eip的监控,然而很多公司也有一套自己的监控,对于自建监控如何实现,这就值得思考了。
本文将采用python实现云主机的公网和私网流量分开统计,可以将结果输入到自建监控中,当发生业务故障时,可以快速定位问题。
1. iftop
iftop是linux系统下面一个监控主机与外部通信的工具,它可以实时监控本机与外部机器的流量大小,需要自行下载安装包编译安装。iftop类似与linux系统自带的top命令,在屏幕终端动态输出监控结果。同时,iftop支持很多参数可选项,其中-t 参数使用不带ncurses的文本界面,可以实现将结果保存到文件。
2. os.popen函数
os是python的系统模块,os.popen可以调用系统的shell命令,相当于直接在shell终端执行shell命令。
3. 实现思路
使用python的os.open来调用iftop命令获取到和主机通信的所有ip的流量大小。然后分别分析公网和私网的流量,将各自的流量之和统计起来,从而实现分别监控系统的公网和私网流量。
4. 代码实现
# -*- coding:utf-8 -*- """ @Author: Rainbowhhy @Date: 2020-11-14 15:16:18 """ import os, re def is_public_ip(ip): # 判断ip是公网还是私网 private = re.findall( r'^((192\.168)|(198\.18)|(198\.19)|(10\.(1\d{2}|2[0-4]\d|25[0-5]|[1-9]\d|\d))|(172\.(1[6-9]|2[0-9]|3[0-1])))\.(1\d{2}|2[0-4]\d|25[0-5]|[1-9]\d|\d)\.(1\d{2}|2[0-4]\d|25[0-5]|[1-9]\d|\d)$', ip) if private: return 0 else: return 1 def convert_unit(unit): # 统一转换成bit后计算 if "Gb" in unit: flow = float(unit.strip("Gb")) * 1024 * 1024 * 1024 elif "Mb" in unit: flow = float(unit.strip("Mb")) * 1024 * 1024 elif "Kb" in unit: flow = float(unit.strip("Kb")) * 1024 else: flow = float(unit.strip("b")) return flow def get_traffic(): # 调用iftop命名获取公网和私网流量 iftop_info = os.popen("iftop -t -N -n -s 4 2>/dev/null | grep -A 1 -E '^ [0-9]'").read() iftop_list = iftop_info.split("\n") count = len(iftop_list) - 1 public_traffic_send = 0 public_traffic_recv = 0 private_traffic_send = 0 private_traffic_recv = 0 public_ips = [] private_ips = [] for i in range(int(count / 2)): # 获取出向流量信息 traffic_send = iftop_list[i * 2] traffic_send_lists = traffic_send.split(" ") while "" in traffic_send_lists: traffic_send_lists.remove("") traffic_send = traffic_send_lists[3] traffic_send_float = convert_unit(traffic_send) # 获取入向流量信息 traffic_recv = iftop_list[i * 2 + 1] traffic_recv_lists = traffic_recv.split(" ") while "" in traffic_recv_lists: traffic_recv_lists.remove("") ip = traffic_recv_lists[0] traffic_recv = traffic_recv_lists[2] traffic_recv_float = convert_unit(traffic_recv) # 计算公网和私网的总流量 if is_public_ip(ip): public_ips.append(ip) public_traffic_send += traffic_send_float public_traffic_recv += traffic_recv_float else: private_ips.append(ip) private_traffic_send += traffic_send_float private_traffic_recv += traffic_recv_float return public_traffic_send, public_traffic_recv, private_traffic_send, private_traffic_recv if __name__ == '__main__': public_traffic_send, public_traffic_recv, private_traffic_send, private_traffic_recv = get_traffic() print("公网入向:%s" % public_traffic_recv) print("公网出向:%s" % public_traffic_send) print("私网入向:%s" % private_traffic_recv) print("私网出向:%s" % private_traffic_send)
5. 输出结果截图
如下图是输出结果展示
file:///home/rainbowhhy/%E6%A1%8C%E9%9D%A2/monitor.png
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。
免责声明:本站资源来自互联网收集,仅供用于学习和交流,请遵循相关法律法规,本站一切资源不代表本站立场,如有侵权、后门、不妥请联系本站删除!
稳了!魔兽国服回归的3条重磅消息!官宣时间再确认!
昨天有一位朋友在大神群里分享,自己亚服账号被封号之后居然弹出了国服的封号信息对话框。
这里面让他访问的是一个国服的战网网址,com.cn和后面的zh都非常明白地表明这就是国服战网。
而他在复制这个网址并且进行登录之后,确实是网易的网址,也就是我们熟悉的停服之后国服发布的暴雪游戏产品运营到期开放退款的说明。这是一件比较奇怪的事情,因为以前都没有出现这样的情况,现在突然提示跳转到国服战网的网址,是不是说明了简体中文客户端已经开始进行更新了呢?