讲师中心 微信公众号
AI工具推荐 视频效率加速

怎么利用 $sent_http_content_type 变量在日志中统计并分析不同 MIME 类型的流量消耗

胖芳大大_2091

胖芳大大_2091

发布时间:2026-06-24 16:31:25

|

210人浏览过

|

来源于php中文网

原创

可通过 Nginx 的 $sent_http_content_type 变量在 access log 中记录响应 MIME 类型,并结合 awk、Prometheus 或 ELK 等工具统计流量占比、请求数及带宽消耗;需在 log_format 中定义该变量,其值为小写标准化类型(如 text/html),未设置时为空或“-”;awk 分析时需确认字段位置,建议清洗参数(如去除 charset)后按大类聚合(如 text、image);进阶可对接 nginxlog-exporter 暴露 Prometheus 指标或用 Logstash 入库做可视化与告警。

怎么利用 $sent_http_content_type 变量在日志中统计并分析不同 mime 类型的流量消耗

可以通过 Nginx 的 $sent_http_content_type 变量,在 access log 中记录每个响应的实际 MIME 类型,再结合日志分析工具(如 awk、goaccess、ELK 或 Prometheus+nginxlog-exporter)统计各类 MIME 类型的流量占比、请求数和带宽消耗。

配置 Nginx 日志格式,捕获 Content-Type

该变量在响应头已发送后才可读取,需确保它出现在 log_format 中,并且放在 log_format 定义里(不能只在 access_log 指令中临时引用):

log_format mime_stats 
  '$remote_addr - $remote_user [$time_local] '
  '"$request" $status $body_bytes_sent '
  '"$http_referer" "$http_user_agent" '
  '$sent_http_content_type';  # 关键:记录实际发出的 Content-Type
<p>access_log /var/log/nginx/access.log mime_stats;
</p>

注意:$sent_http_content_type 是小写形式(Nginx 自动标准化),值如 text/html、application/json、image/jpeg;若响应未设 Content-Type(极少见),该字段为空或显示为 -。

用 awk 快速统计各类型流量与请求数

假设日志已按上述格式生成,可运行以下命令快速汇总(按字节数降序):

  • awk '{ct[$12] += $10; req[$12]++} END {for (i in ct) print ct[i], req[i], i}' /var/log/nginx/access.log | sort -nr
  • 其中 $12 对应 $sent_http_content_type 字段(按空格分隔,位置取决于你的 log_format);$10 是 $body_bytes_sent(实际传输的响应体字节数)
  • 建议先用 head -1 /var/log/nginx/access.log | awk '{print NF}' 确认字段总数,再用 awk '{print $0}' | cut -d' ' -f1-15 查看前几行字段对齐情况,避免错位

识别常见 MIME 类型并归类分析

原始值较细碎(如 text/css; charset=utf-8、application/javascript; charset=utf-8),建议清洗后再聚合:

  • 用 sed 或 awk 提取主类型:例如 sub(/;.*$/, "", $12) 去掉参数部分,得到 text/css → text/css
  • 按大类合并:将 text/html、text/plain、text/css、text/javascript 统计为 “text”;image/png、image/jpeg、image/webp 归为 “image”
  • 对 API 场景重点监控 application/json 和 application/xml 的请求频次与平均响应体积,辅助判断接口负载

进阶:对接时序分析或告警

若需长期监控,推荐两种轻量路径:

  • 使用 nginxlog-exporter,自定义解析规则提取 content_type 和 body_bytes_sent,暴露为 Prometheus 指标,例如:nginx_http_response_size_bytes_sum{content_type="application/json"}
  • 用 Logstash 或 Fluent Bit 做实时解析,把 $sent_http_content_type 作为字段入库,配合 Kibana 制作“MIME 类型带宽热力图”或“Top 5 流量类型周环比”看板
  • 设置简单告警:当某类(如 video/mp4)单日流量突增 300%,或 application/octet-stream 请求量异常升高(可能文件下载被滥用),触发通知

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

383

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3267

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

5945

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

561

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1476

2024.07.09

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

3938

2024.08.07

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

122

2026.01.13

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

437

2026.01.13

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

80

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn