使用python获取整月每一天的系统监控数据生成报表

1.安装阿里开源监控工具tsar

tsar官方网站

wget -O tsar.zip https://github.com/alibaba/tsar/archive/master.zip --no-check-certificate

unzip tsar.zip

cd tsar

make && make install

安装后，您可能会看到以下文件：

• /etc/tsar/tsar.conf，这是tsar的主要配置文件;
• /etc/cron.d/tsar，用来运行tsar每分钟收集信息;
• /etc/logrotate.d/tsar 将每月轮换tsar的日志文件;
• /usr/local/tsar/modules 是所有模块库（* .so）所在的目录;

用法

　　运行tsar -l以查看实时监控是否有效，例如，每秒显示状态（-i 1）

• null：查看默认mods历史数据， tsar
• --modname：指定要显示的模块， tsar --cpu
• -L / - list：列出可用的moudule， tsar -L
• -l / - live：显示实时信息， tsar -l --cpu
• -i / - interval：设置报告的间隔， tsar -i 1 --cpu
• -s / - spec：指定模块详细信息字段， tsar --cpu -s sys,util
• -D / - detail：不要将数据转换为K / M / G， tsar --mem -D
• -m / - merge：将multiply项合并为一， tsar --io -m
• -I / - item：显示规格项数据， tsar --io -I sda
• -d / - date：指定数据，YYYYMMDD或n表示n天前
• -C / - 检查：显示最后的收集数据
• -h / - help：显示帮助， tsar -h

2.写python脚本

python 2.7.5 的环境

#!/bin/python

# encoding=utf-8

# Author By:BenjaminYang

import calendar

import time

import os

date=str(input('请输入你要查询的年月:\n（格式如：201811）\n----------------\n'))

print('###############################################################################################')

year=int(date[0:4])  #数据切片取得年

month=int(date[4:6]) #数据切片取得月

total_days=calendar.monthrange(year,month)[1] #根据年月组合获取该月共有多少天

start_time=time.time()

def report_check():

    i=0

    #定义开始时间

#遍历每一天的tsar监控数据

    while i<total_days:

        if i<9:

              i=i+1

              date=str(year)+str(month)+str(0)+str(i)

        else:

            i=i+1

            date=str(year)+str(month)+str(i)

        os.environ['date']=date

        #将获取到的数据写入文件

        cpu=os.popen("tsar -d $date|grep MEAN|awk '{print $2}'").read()

        mem=os.popen("tsar -d $date|grep MEAN|awk '{print $3}'").read()

        tcp=os.popen("tsar -d $date|grep MEAN|awk '{print $4}'").read()

        bytein=os.popen("tsar -d $date|grep MEAN|awk '{print $5}'").read()

        byteout=os.popen("tsar -d $date|grep MEAN|awk '{print $6}'").read()

        sda=os.popen("tsar -d $date|grep MEAN|awk '{print $7}'").read()

        sdb=os.popen("tsar -d $date|grep MEAN|awk '{print $8}'").read()

        load=os.popen("tsar -d $date|grep MEAN|awk '{print $9}'").read()

        print date

        print os.popen("tsar -d $date|grep MEAN").read()

        with open("data.csv","a+") as f:

            if cpu.strip()=='':

                f.write(str(date)+','+'have null data'+'\n')

            else:

                f.write(str(date+','+cpu+','+mem+','+tcp+','+bytein+','+byteout+','+sda+','+sdb+','+load).replace("\n","")+"\n")

os.system('>data.csv')

ag=['adsag','dockerag','ecsag','odpsag','opsag','ossag','rdsag','slbag']

with open("data.csv","a+") as f:

       f.write(str('check_date'+','+'cpu'+','+'mem'+','+'tcp'+','+'bytein'+','+'byteout'+','+'sda'+','+'sdb'+','+'load').replace("\n","")+"\n")

report_check()

end_time=time.time()

total_time=end_time-start_time

print "此次生成报表总共耗时:",total_time

3.执行效果

会生成一个data.csv的报表

将他导出到我们本地