讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux 怎么批量下载某个网站所有图片?

落雪君_6751

落雪君_6751

发布时间:2025-12-05 17:32:03

|

275人浏览过

|

来源于php中文网

原创

wget或curl配合脚本可批量下载网站图片,关键在于选对工具、参数及规避反爬;wget适合静态站递归下载,curl+解析工具更适JS渲染页面;需注意robots.txt、请求频率、User-Agent及HTTPS证书等问题。

linux 怎么批量下载某个网站所有图片?

用 wget 或 curl + 简单脚本 就能批量下载网站图片,关键是选对工具、加好参数、避开反爬限制。

用 wget 递归下载所有图片(最常用)

wget 支持按后缀过滤和深度限制,适合静态页面为主的网站。

  • 基础命令:获取当前页及子目录下所有 jpg/png/gif
wget -r -P ./images -A "*.jpg,*.jpeg,*.png,*.gif" -nH --no-parent https://example.com/
  • -r:开启递归下载
  • -P ./images:保存到本地 images 文件夹
  • -A:只接受指定后缀的文件
  • --no-parent:不跳到上级目录,防止越界抓取
  • -nH:不创建以主机名命名的子目录

如果网站图片在独立域名(如 cdn.example.com),加上 -H 允许跨域,再用 --domains=cdn.example.com 限定范围。

python学习
python学习

Python 编程学习助手 skill,面向零基础用户。 当用户表达以下意图时触发: - 学习 Python 基础概念(变量、数据类型、循环、函数、类等) - 请求 Python 练习题或测验 - 请求审查或调试 Python 代码 - 请求 Python 项目实战指导(爬虫、数据分析、Web 开发等入门项目) - 泛化表述如"教我 Python""我想学编程""Python 怎么写""帮我学 Python" 此 skill

下载

先提取图片链接再下载(更灵活、适合复杂结构)

当网页用 JS 渲染、或图片地址藏在 data-src、背景样式里时,wget 默认抓不到。这时先用工具解析 HTML 提取真实图片 URL。

  • 用 curl + grep + sed 快速提取 img src:
curl -s https://example.com | grep -o 'src="[^"]*"' | sed 's/src="//' | sed 's/"$//' | grep -E '\.(jpg|png|gif)$' | xargs -I {} wget -P ./images {}
  • 更可靠可用 python + requests + BeautifulSoup 解析 DOM,处理相对路径、懒加载等
  • 注意加 User-Agent 头,避免被 403 拒绝(wget 可加 --user-agent="Mozilla/5.0...")

注意事项和避坑提醒

不是所有网站都欢迎爬取,操作前请确认 robots.txt 和网站条款。

  • 加 --random-wait 或 --wait=1 控制请求频率,别给服务器添堵
  • 有些图片是带参数的动态 URL(如 ?v=123),wget 默认会保留参数;如需去参,得用脚本预处理
  • HTTPS 网站若证书异常,wget 加 --no-check-certificate(仅测试用,生产环境慎用)
  • 下载中断可加 -c 续传,配合 -N 跳过已下载文件

基本上就这些。小站直接 wget 一行搞定;大站或前端复杂的,建议先抽链接再下,可控性更强。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

相关专题

更多
Python爬虫获取数据的方法
Python爬虫获取数据的方法

Python爬虫可以通过请求库发送HTTP请求、解析库解析HTML、正则表达式提取数据,或使用数据抓取框架来获取数据。更多关于Python爬虫相关知识。详情阅读本专题下面的文章。php中文网欢迎大家前来学习。

693

2023.11.13

curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

3703

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

855

2023.10.30

js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

4496

2023.06.20

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1375

2023.07.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

1778

2023.08.03

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

10043

2023.08.17

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

980

2023.09.01

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

40

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn