PHP无法直接限制爬虫并发数，须在Nginx等上层实现限流；可配合PHP+Redis校验UA与频率，或用.htaccess封禁异常UA，但不可依赖PHP单点控制。
PHP本身无法直接限制爬虫的并发请求数，因为并发控制发生在网络传输和服务器处理层面，PHP是单次请求响应式脚本语言，不维护长连接或全局并发状态。真正有效的限制需在更上层（如Web服务器、反向代理或网络层）实现，PHP只能做辅助校验与响应控制。
用Nginx限制同一IP的并发连接数
Nginx是实际最常用且高效的方式。它能在请求到达PHP前就拦截超限流量，避免PHP进程被无效请求拖垮。
- 在http或server块中定义限流区域：
limit_conn_zone $binary_remote_addr zone=addr:10m; - 在location中启用限制（例如最多2个并发）：
limit_conn addr 2; - 配合
limit_req还可限制请求速率（如每秒1个）：limit_req zone=burst burst=3 nodelay;
通过PHP校验User-Agent和请求频率（辅助手段）
PHP可读取$_SERVER['HTTP_USER_AGENT']识别常见爬虫（如python-requests、curl、Scrapy），再结合Redis记录IP+UA的短时请求数，超阈值则返回429或跳转/休眠。
- 示例逻辑：提取客户端IP（注意代理头）、生成唯一键如
ua:192.168.1.100:python-requests - 用Redis的
INCR+EXPIRE实现滑动窗口计数（如5秒内≤3次） - 若超限，输出
http_response_code(429); exit('Too Many Requests');
利用.htaccess（Apache环境）简单封禁高频UA
适用于无Redis、仅需粗粒度过滤的场景。虽不能精确控“并发”，但能快速屏蔽明显异常的批量请求。
立即学习“PHP免费学习笔记（深入）”；
- 在
.htaccess中添加：RewriteCond %{HTTP_USER_AGENT} python-requests|curl|wget|scrapy [NC]RewriteRule .* - [F,L] - 配合
mod_evasive模块可进一步限制IP级请求数（如每秒最多10次）
关键提醒：别依赖PHP单点做并发控制
纯靠PHP文件里写sleep()、file_put_contents()记日志、或查数据库统计——这类做法在高并发下极易失效甚至引发雪崩：
- 每个PHP进程独立运行，无法共享内存中的计数器（除非用APCu/Redis等外部存储）
- 文件锁在NFS或容器环境下可能不可靠；数据库写入会成为性能瓶颈
- 爬虫绕过PHP（直连静态资源、伪造Referer）时，所有PHP层逻辑完全失效
