用Python脚本实现对Linux服务器的监控.docx

用 Python 脚本实现对 Linux 服务器的监控目前 Linux 下有一些使用 Python 语言编写的 Linux 系统监控工具 比如 inotify-sync（文件系统安全监控软件）、 glances（资源监控工具）在实际工作中，Linux 系统管理员可以根据自己使用的服务器的具体情况编写一下简单实用的脚本实现对 Linux 服务器的监控。 本文介绍一下使用 Python 脚本实现对 Linux 服务器 CPU 内存 网络的监控脚本的编写。1评论：曹 江华, 系统管理员, 中科思密达有限公司2013 年 12 月 23 日 内容Python 版本说明Python 是由 Guido van Rossum 开发的、可免费获得的、非常高级的解释型语言。其语法简单易懂，而其面向对象的语义功能强大（但又灵活）。Python 可以广泛使用并具有高度的可移植性。本文 Linux服务器是 Ubuntu 12.10，Python 版本是 2.7。如果是Python 3.0版本的语法上有一定的出入。另外这里笔者所说的 Python 是 CPython，CPython 是用 C 语言实现的 Python 解释器，也是官方的并且是最广泛使用的 Python 解释器。除了 CPython 以外，还有用 Java 实现的 Jython 和用.NET 实现的 IronPython，使 Python 方便地和 Java 程序、.NET 程序集成。另外还有一些实验性的 Python 解释器比如 PyPy。CPython 是使用字节码的解释器，任何程序源代码在执行之前先要编译成字节码。它还有和几种其它语言（包括 C 语言）交互的外部函数接口。回页首工作原理：基于/proc 文件系统Linux 系统为管理员提供了非常好的方法，使其可以在系统运行时更改内核，而不需要重新引导内核系统，这是通过/proc 虚拟文件系统实现的。/proc 文件虚拟系统是一种内核和内核模块用来向进程（process）发送信息的机制（所以叫做“/proc”），这个伪文件系统允许与内核内部数据结构交互，获取有关进程的有用信息，在运行中（on the fly）改变设置（通过改变内核参数）。与其他文件系统不同，/proc 存在于内存而不是硬盘中。proc 文件系统提供的信息如下： 进程信息：系统中的任何一个进程，在 proc 的子目录中都有一个同名的进程 ID，可以找到 cmdline、mem、root、stat、statm，以及 status。某些信息只有超级用户可见，例如进程根目录。每一个单独含有现有进程信息的进程有一些可用的专门链接，系统中的任何一个进程都有一个单独的自链接指向进程信息，其用处就是从进程中获取命令行信息。 系统信息：如果需要了解整个系统信息中也可以从/proc/stat 中获得，其中包括 CPU 占用情况、磁盘空间、内存对换、中断等。 CPU 信息：利用/proc/CPUinfo 文件可以获得中央处理器的当前准确信息。 负载信息：/proc/loadavg 文件包含系统负载信息。 系统内存信息：/proc/meminfo 文件包含系统内存的详细信息，其中显示物理内存的数量、可用交换空间的数量，以及空闲内存的数量等。表 1 是 /proc 目录中的主要文件的说明：表 1 /proc 目录中的主要文件的说明文件或目录名称描 述apm高级电源管理信息cmdline这个文件给出了内核启动的命令行CPUinfo中央处理器信息devices可以用到的设备（块设备/字符设备）dma显示当前使用的 DMA 通道filesystems核心配置的文件系统ioports当前使用的 I/O 端口interrupts这个文件的每一行都有一个保留的中断kcore系统物理内存映像kmsg核心输出的消息，被送到日志文件mdstat这个文件包含了由 md 设备驱动程序控制的 RAID 设备信息loadavg系统平均负载均衡meminfo存储器使用信息，包括物理内存和交换内存modules这个文件给出可加载内核模块的信息。lsmod 程序用这些信息显示有关模块的名称，大小，使用数目方面的信息net网络协议状态信息partitions系统识别的分区表pcipci 设备信息scsiscsi 设备信息self到查看/proc 程序进程目录的符号连接stat这个文件包含的信息有 CPU 利用率，磁盘，内存页，内存对换，全部中断，接触开关以及赏赐自举时间swaps显示的是交换分区的使用情况uptime这个文件给出自从上次系统自举以来的秒数，以及其中有多少秒处于空闲version这个文件只有一行内容，说明正在运行的内核版本。可以用标准的编程方法进行分析获得所需的系统信息下面本文的几个例子都是使用Python 脚本读取/proc 目录中的主要文件来实现实现对 Linux 服务器的监控的 。使用 Python 脚本实现对 Linux 服务器的监控对于 CPU（中央处理器）监测脚本 1 名称 CPU1.py，作用获取 CPU 的信息。清单 1.获取 CPU 的信息#!/usr/bin/env Pythonfrom _future_ import print_functionfrom collections import OrderedDictimport pprintdef CPUinfo(): Return the information in /proc/CPUinfo as a dictionary in the following format: CPU_infoproc0=. CPU_infoproc1=. CPUinfo=OrderedDict() procinfo=OrderedDict() nprocs = 0 with open(/proc/CPUinfo) as f: for line in f: if not line.strip(): # end of one processor CPUinfoproc%s % nprocs = procinfo nprocs=nprocs+1 # Reset procinfo=OrderedDict() else: if len(line.split(:) = 2: procinfoline.split(:)0.strip() = line.split(:)1.strip() else: procinfoline.split(:)0.strip() = return CPUinfoif _name_=_main_: CPUinfo = CPUinfo() for processor in CPUinfo.keys(): print(CPUinfoprocessormodel name)简单说明一下清单 1，读取/proc/CPUinfo 中的信息，返回 list，每核心一个 dict。其中 list 是一个使用方括号括起来的有序元素集合。List 可以作为以 0 下标开始的数组。Dict 是Python的内置数据类型之一, 它定义了键和值之间一对一的关系。OrderedDict 是一个字典子类，可以记住其内容增加的顺序。常规 dict 并不跟踪插入顺序，迭代处理时会根据键在散列表中存储的顺序来生成值。在 OrderedDict 中则相反，它会记住元素插入的顺序，并在创建迭代器时使用这个顺序。可以使用 Python 命令运行脚本 CPU1.py 结果见图 1# Python CPU1.py Intel(R) Celeron(R) CPU E3200 2.40GHz图 1.运行清单 1也可以使用 chmod 命令添加权限收直接运行 CPU1.py#chmod +x CPU1.py# ./CPU1.py对于系统负载监测脚本 2 名称 CPU2.py，作用获取系统的负载信息清单 2 获取系统的负载信息#!/usr/bin/env Python import os def load_stat(): loadavg = f = open(/proc/loadavg) con = f.read().split() f.close() loadavglavg_1=con0 loadavglavg_5=con1 loadavglavg_15=con2 loadavgnr=con3 loadavglast_pid=con4 return loadavg print loadavg,load_stat()lavg_15简单说明一下清单 2：清单 2 读取/proc/loadavg 中的信息，import os ：Python 中 import 用于导入不同的模块，包括系统提供和自定义的模块。其基本形式为：import 模块名 as 别名，如果只需要导入模块中的部分或全部内容可以用形式：from 模块名 import *来导入相应的模块。OS 模块 os 模块提供了一个统一的操作系统接口函数，os 模块能在不同操作系统平台如 nt，posix 中的特定函数间自动切换，从而实现跨平台操作。可以使用 Python 命令运行脚本 CPU1.py 结果见图 2 # Python CPU2.py图 2.运行清单 2对于内存信息的获取脚本 3 名称 mem.py，作用是获取内存使用情况信息清单 3 获取内存使用情况#!/usr/bin/env Pythonfrom _future_ import print_functionfrom collections import OrderedDictdef meminfo(): Return the information in /proc/meminfo as a dictionary meminfo=OrderedDict() with open(/proc/meminfo) as f: for line in f: meminfoline.split(:)0 = line.split(:)1.strip() return meminfoif _name_=_main_: #print(meminfo() meminfo = meminfo() print(Total memory: 0.format(meminfoMemTotal) print(Free memory: 0.format(meminfoMemFree)简单说明一下清单 3：清单 3 读取 proc/meminfo 中的信息，Python 字符串的 split 方法是用的频率还是比较多的。比如我们需要存储一个很长的数据，并且按照有结构的方法存储，方便以后取数据进行处理。当然可以用 json 的形式。但是也可以把数据存储到一个字段里面，然后有某种标示符来分割。 Python 中的 strip 用于去除字符串的首位字符，最后清单 3 打印出内存总数和空闲数。可以使用 Python 命令运行脚本 mem.py 结果见图 3。 # Python mem.py图 3.运行清单 3对于网络接口的监测脚本 4 名称是 net.py，作用获取网络接口的使用情况。清单 4 net.py 获取网络接口的输入和输出#!/usr/bin/env Pythonimport timeimport sysif len(sys.argv) 1:INTERFACE = sys.argv1else:INTERFACE = eth0STATS = print Interface:,INTERFACEdefrx():ifstat = open(/proc/net/dev).readlines()for interface in ifstat:if INTERFACE in interface:stat = float(interface.split()1)STATS0: = statdeftx():ifstat = open(/proc/net/dev).readlines()for interface in ifstat:if INTERFACE in interface:stat = float(interface.split()9)STATS1: = statprintInOutrx()tx()whileTrue:time.sleep(1)rxstat_o = list(STATS)rx()tx()RX = float(STATS0)RX_O = rxstat_o0TX = float(STATS1)TX_O = rxstat_o1RX_RATE = round(RX - RX_O)/1024/1024,3)TX_RATE = round(TX - TX_O)/1024/1024,3)print RX_RATE ,MB,TX_RATE ,MB简单说明一下清单 4：清单 4 读取/proc/net/dev 中的信息，Python 中文件操作可以通过 open 函数，这的确很像 C 语言中的 fopen。通过 open 函数获取一个 file object，然后调用 read()，write()等方法对文件进行读写操作。另外 Python 将文本文件的内容读入可以操作的字符串变量非常容易。文件对象提供了三个“读”方法： read()、readline() 和 readlines()。每种方法可以接受一个变量以限制每次读取的数据量，但它们通常不使用变量。 .read() 每次读取整个文件，它通常用于将文件内容放到一个字符串变量中。然而 .read() 生成文件内容最直接的字符串表示，但对于连续的面向行的处理，它却是不必要的，并且如果文件大于可用内存，则不可能实现这种处理。.readline() 和 .readlines() 之间的差异是后者一次读取整个文件，象 .read() 一样。.readlines() 自动将文件内容分析成一个行的列表，该列表可以由 Python 的 for . in . 结构进行处理。另一方面，.readline() 每次只读取一行，通常比 .readlines() 慢得多。仅当没有足够内存可以一次读取整个文件时，才应该使用 .readline()。最后清单 4 打印出网络接口的输入和输出情况。可以使用 Python 命令运行脚本 net.py 结果见图 4 #Python net.py图 4.运行清单 4监控 Apache 服务器进程的 Python 脚本Apache 服务器进程可能