当前位置:首页 > 技术文章 > 正文内容

SSH,一个加密的网络协议的IT运维库!

arlanguage3个月前 (01-31)技术文章28

Python日志系统实战:让运维工作更智能高效

大家好,我是汪哥!今天跟大家聊一个运维工作中非常重要的话题 —— Python日志系统的应用。还记得我刚入行时,经常为了排查系统问题翻遍各种日志文件而头疼。直到掌握了Python的logging模块,让日志管理变得优雅又高效!

学习目标

·

· 掌握Python logging模块的核心功能

· 学会配置多样化的日志输出格式

· 实现日志文件的自动轮转和管理

· 构建一个完整的日志收集系统

预备知识

·

· Python基础语法

· 文件操作基础

· 简单的系统运维经验

核心内容

1. 日志系统基础

日志就像系统的"体检报告",记录着应用运行的方方面面。Python的logging模块提供了五个日志级别:

·

· DEBUG:调试信息

· INFO:一般信息

· WARNING:警告信息

· ERROR:错误信息

· CRITICAL:严重错误

2. 实战代码演示

python运行复制

import loggingfrom logging.handlers import RotatingFileHandlerimport os# 创建logger对象logger = logging.getLogger('ops_monitor')logger.setLevel(logging.DEBUG)# 创建rotating file handlerlog_path = 'app.log'file_handler = RotatingFileHandler( log_path, maxBytes=1024*1024, # 1MB backupCount=5)# 设置日志格式formatter = logging.Formatter( '%(asctime)s - %(name)s - %(levelname)s - %(message)s')file_handler.setFormatter(formatter)# 添加handlerlogger.addHandler(file_handler)# 使用示例def monitor_disk_usage(path='/'): """监控磁盘使用情况""" try: usage = os.statvfs(path) free = usage.f_bavail * usage.f_frsize total = usage.f_blocks * usage.f_frsize used = (usage.f_blocks - usage.f_bfree) * usage.f_frsize percent = used / total * 100 if percent >; 90: logger.critical(f'磁盘使用率超过90%!当前使用率: {percent:.2f}%') elif percent >; 80: logger.warning(f'磁盘使用率超过80%!当前使用率: {percent:.2f}%') else: logger.info(f'磁盘使用正常,当前使用率: {percent:.2f}%') except Exception as e: logger.error(f'监控出错: {str(e)}')# 执行监控monitor_disk_usage()

3. 实战案例:日志分析系统

让我们来打造一个简单的日志分析工具:

python运行复制

def analyze_logs(log_file): """分析日志文件,统计各级别日志数量""" level_count = { 'DEBUG': 0, 'INFO': 0, 'WARNING': 0, 'ERROR': 0, 'CRITICAL': 0 } try: with open(log_file, 'r') as f: for line in f: for level in level_count.keys(): if f' - {level} - ' in line: level_count[level] += 1 print("\n日志分析结果:") for level, count in level_count.items(): print(f"{level}: {count}条") except Exception as e: print(f"分析失败: {str(e)}")# 分析日志analyze_logs('app.log')

4. 最佳实践建议



· 合理设置日志级别,避免日志太多或太少

· 使用rotating handler防止日志文件过大

· 添加合适的上下文信息

· 定期清理过期日志文件

· 考虑使用异步日志处理提高性能

互动环节

练习题

1.

2. 如何配置同时输出到控制台和文件?

3. 如何按照日期自动切割日志文件?

4. 如何添加自定义的日志格式?

挑战任务

实现一个Web服务的日志监控系统,要求:

1.

2. 实时监控nginx访问日志

3. 统计访问量和响应时间

4. 发现异常时邮件告警

5. 生成每日分析报告

小结

本节重点回顾

·

· Python logging模块的基本使用

· 日志级别和格式配置

· 文件轮转和管理机制

· 日志分析实战技巧

下期预告

下期我们将深入探讨Python异步编程在运维工作中的应用,让监控系统更高效!

有问题随时在评论区问我。我是汪哥,我们下期再见!

学习打卡:在评论区分享你的学习心得

实战展示:欢迎分享你的日志系统实现

? 点赞收藏,你的支持是我创作的动力!

扫描二维码推送至手机访问。

版权声明:本文由AR编程网发布,如需转载请注明出处。

本文链接:http://www.arlanguage.com/post/1551.html

标签: nginx访问量
分享给朋友:

“SSH,一个加密的网络协议的IT运维库!” 的相关文章

Nginx动态请求如何处理?

动态请求通常指的是那些需要服务器端生成内容的请求,例如,当用户访问一个包含动态内容的网页时,服务器需要执行脚本(如PHP、Java、Ruby等)来生成HTML、CSS、JavaScript等文件。以下是在Nginx中处理动态请求的一般步骤:配置Nginx:在Nginx的配置文件中,使用locatio...

16《Nginx 入门教程》Nginx防盗链配置

百度百科的解释如下:盗链是指服务提供商自己不提供服务的内容,通过技术手段绕过其它有利益的最终用户界面(如广告),直接在自己的网站上向最终用户提供其它服务提供商的服务内容,骗取最终用户的浏览和点击率。受益者不提供资源或提供很少的资源,而真正的服务提供商却得不到任何的收益。盗链在如今的互联网世界无处不在...

logstash+ES+kibana搭建日志收集分析系统

日志监控和分析在保障业务稳定运行时,起到了很重要的作用,不过一般情况下日志都分散在各个生产服务器,且开发人员无法登陆生产服务器,这时候就需要一个集中式的日志收集装置,对日志中的关键字进行监控,触发异常时进行报警,并且开发人员能够查看相关日志。logstash+elasticsearch+kibana...

docker安装php

本节将介绍在线使用Docker安装PHP解析器的步骤。通过本节的实操,您可以掌握从Docker环境的使用,PHP镜像以及Nginx服务器的拉取、导入、容器的启动的全部过程,从而具备使用Docker安装并部署PHP与ngninx的能力。本节要求您具备的基本能力有Linux,Docker,以及nginx...

nginx命令——学习记录 nginx详细教程

nginx命令--学习记录查看80端口是否被占用netstat -ntlpnginx命令#/usr/local/nginx/sbin/nginx 启动命令#/usr/local/nginx/sbin/nginx -t 检测配置文件 #/usr/local/nginx/sbin/ngin...

如何找出爬取网站的来源IP? 爬取网站源代码

1.背景最近网站数据库性能很不稳定,查询性能在某段时间很慢,服务器CPU也很高,平常时间很低,感觉被爬虫恶意搞了,因此我分析了一下最近的nginx访问日志2.方法找出访问量最大20个ip[root@100 nginx]# cat liuhaihua.access.log | awk -F "...