讲师中心 微信公众号
AI工具推荐 视频效率加速

防止恶意网络爬虫自动提交HTML表单的方法

云丽酱_3112

云丽酱_3112

发布时间:2026-09-02 08:54:22

|

833人浏览过

|

来源于php中文网

原创

前端 onsubmit return false 无法防爬虫,因爬虫不执行 JS、直接发 HTTP 请求;须服务端校验 Referer/User-Agent(仅初级过滤)、CSRF Token+时效签名(核心)、行为验证与速率限制。

防止恶意网络爬虫自动提交html表单的方法

为什么 onsubmit 里加 return false 挡不住爬虫

因为爬虫根本不执行 JavaScript,它只发 HTTP 请求。你前端加的任何 onsubmitevent.preventDefault() 或按钮禁用逻辑,对直接构造 POST 请求的爬虫完全无效。它们绕过 DOM,直调接口,甚至根本不用打开页面。

必须在服务端拦截:验证 RefererUser-Agent 的实际效果

这两个 HTTP 头能筛掉最基础的工具型爬虫(比如用 curl 或 Python requests 默认发起的请求),但极易伪造——只要加一行 headers={'User-Agent': 'Mozilla/5.0...', 'Referer': 'https://yoursite.com/form'} 就能绕过。所以只能作为初级过滤,不能单独依赖。

  • Referer 在无来源跳转(如书签、HTTPS→HTTP)下可能为空,误杀合法用户
  • User-Agent 白名单太窄会挡掉 Edge、Firefox 新版本;太宽等于没设
  • 两者都可在 Nginx 或后端中间件(如 Express 的 req.get())里快速校验,但仅建议用于日志标记或限速触发条件

真正有效的方案:CSRF Token + 时效性表单签名

核心是让每个表单提交携带一个“一次一换、有时效、绑 session”的凭证。爬虫即使拿到页面 HTML,也无法复用 Token,更无法生成新签名。

  • 生成时:服务端为每个用户 session 生成随机 csrf_token,嵌入表单隐藏域:<input type="hidden" name="csrf_token" value="a1b2c3...">
  • 提交时:同时校验 csrf_token 是否存在、是否匹配当前 session、是否未过期(例如 10 分钟)
  • 进阶加固:对表单字段做签名,比如拼接 action + timestamp + user_id + secret_key 后 SHA256,放在 form_signature 字段里,服务端重算比对

注意:Token 绝不能通过 URL 传递(易被日志泄露),也不能存 localStorage(跨 tab 共享导致复用);务必绑定 session 且单次有效(提交后立即失效)。

html-ppt-to-pdf
html-ppt-to-pdf

将使用 `

` 约定的 HTML 幻灯片转换为高保真、矢量文本 PDF(使用 Playwright + Chromium 原生 PDF 功能)。

下载

立即学习前端免费学习笔记(深入)”;

补充防御:行为验证与速率限制的实际配置点

单纯验证码(CAPTCHA)体验差,但轻量级行为验证(如 invisible reCAPTCHA v3、hCaptcha)+ 后端速率控制,组合起来性价比最高。

  • 对同一 IP 或同一 session_id,1 分钟内超过 3 次表单提交就返回 429 Too Many Requests
  • reCAPTCHA v3 返回的 score 建议阈值设为 0.7 以下时拒绝,而不是直接弹窗——避免干扰真实用户
  • 关键动作(如注册、密码重置)必须强制校验,普通搜索或留言可放宽;别所有接口都套同一套规则

最容易被忽略的是:表单 action 地址本身不要暴露在 JS 变量或 API 响应里,否则爬虫能动态提取并批量请求。静态写死在 HTML 中,或由服务端渲染注入,更可控。

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

4895

2023.06.14

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

2852

2023.06.21

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

2530

2023.07.31

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

2559

2023.08.01

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

4539

2023.08.11

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

2501

2023.08.11

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

2289

2023.08.31

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

2108

2023.09.01

Vibeknow在线使用入口合集
Vibeknow在线使用入口合集

本专题汇总了Vibeknow在线创作视频的官方入口及网页版使用教程,涵盖PPT、PDF、Word等文档一键转讲解视频的核心操作,并整理了免费版水印规则与手机端浏览器访问指南,助你快速将知识内容视频化。

0

2026.09.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Bootstrap 5教程
Bootstrap 5教程

共46课时 | 5.6万人学习

Bootstrap.用户界面架构视频教程
Bootstrap.用户界面架构视频教程

共35课时 | 8.8万人学习

微信小程序基础与实战
微信小程序基础与实战

共23课时 | 6.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn