讲师中心 微信公众号
AI工具推荐 视频效率加速

JSoup 在 Android 中处理超时缓慢网站的正确配置方法

星敏姑娘_9171

星敏姑娘_9171

发布时间:2026-03-25 08:38:01

|

663人浏览过

|

来源于php中文网

原创

本文详解如何在 android studio 中使用 jsoup 爬取响应极慢(如 25 秒以上)的目标网站,重点解决因默认或显式 timeout 设置不当导致连接中断、文档为空的问题,并给出安全、可靠、符合 android 最佳实践的配置方案。

本文详解如何在 android studio 中使用 jsoup 爬取响应极慢(如 25 秒以上)的目标网站,重点解决因默认或显式 timeout 设置不当导致连接中断、文档为空的问题,并给出安全、可靠、符合 android 最佳实践的配置方案。

在 Android 开发中,使用 JSoup 进行网页抓取(Web Scraping)是一种轻量级且常用的技术。但当目标网站响应异常缓慢(例如你提到的 https://www.php.cn/link/06277c373fd4be8ecb96de3776dd0963 需要约 25 秒才返回完整 HTML),常规的 timeout(60000)(即 60 秒)仍可能失败——这并非因为超时值不够大,而是 JSoup 的 timeout() 方法实际控制的是 socket 连接建立 + 响应头接收阶段的总耗时,不包含完整响应体下载与解析时间。更关键的是:Android 平台对网络操作有严格限制(如主线程禁止联网),而 JSoup 的 .get() 是同步阻塞调用,若未配合异步机制,极易触发 NetworkOnMainThreadException 或 ANR。

✅ 正确做法不是盲目增大 timeout,而是将 timeout 设为 0(无限等待)并确保运行在后台线程:

// ✅ 推荐:在 WorkManager / AsyncTask(已弃用,仅作示意)/ Kotlin 协程 / 或自定义线程中执行
new Thread(() -> {
    try {
        // timeout(0) 表示禁用超时限制,等待服务器完成整个响应传输
        Document doc = Jsoup.connect("https://www.php.cn/link/06277c373fd4be8ecb96de3776dd0963/translation.php?source=enn%20bon%20garson&lang=kreol&boutton=Translate")
                .timeout(0)                    // 关键:启用无限等待(仅适用于可控可信源)
                .userAgent("Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36") // 模拟浏览器 UA
                .followRedirects(true)
                .get();

        // 提取 body 文本(根据实际 DOM 结构调整选择器)
        String translation = doc.body().text();
        Log.d("JsoupResult", "Parsed: " + translation);

        // ⚠️ 切记:更新 UI 必须切回主线程
        runOnUiThread(() -> {
            textView.setText(translation);
        });

    } catch (IOException e) {
        Log.e("JsoupError", "Failed to fetch page", e);
        runOnUiThread(() -> textView.setText("Error: " + e.getMessage()));
    }
}).start();

⚠️ 重要注意事项:

  • timeout(0) 仅应在明确知晓目标服务稳定性且具备容错机制的前提下使用;生产环境建议搭配 Future + ExecutorService 设置逻辑超时(如 45 秒后主动 cancel),避免线程永久挂起;
  • Android 9+(API 28+)默认禁止明文 HTTP 请求,确保目标网站使用 HTTPS(本例符合);
  • 必须在 AndroidManifest.xml 中声明网络权限:
    <uses-permission android:name="android.permission.INTERNET" />
  • 若页面内容由 JavaScript 动态渲染(本例为服务端直出 HTML,无需处理),JSoup 无法执行 JS;此时需考虑 WebView + JavaScriptInterface 或专用无头浏览器(如 Selenium/Playwright),但 Android 端不推荐;
  • 遵循网站 robots.txt 及服务条款,高频请求可能被封禁 IP,建议添加合理延时(.maxBodySize() 也可限制响应体积防 OOM)。

? 总结:面对高延迟网站,核心是分离「网络等待策略」与「线程调度策略」——用 timeout(0) 解除 JSoup 底层 socket 超时约束,再通过 Android 标准异步机制(如 CoroutineScope(Dispatchers.IO) 或 Executors.newSingleThreadExecutor())保障主线程安全与用户体验。永远不要在主线程直接调用 .get(),也避免在不可信网络环境中无限制等待。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

相关专题

更多
pdf怎么转换成xml格式
pdf怎么转换成xml格式

将 pdf 转换为 xml 的方法:1. 使用在线转换器;2. 使用桌面软件(如 adobe acrobat、itext);3. 使用命令行工具(如 pdftoxml)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

4404

2024.04.01

xml怎么变成word
xml怎么变成word

步骤:1. 导入 xml 文件;2. 选择 xml 结构;3. 映射 xml 元素到 word 元素;4. 生成 word 文档。提示:确保 xml 文件结构良好,并预览 word 文档以验证转换是否成功。想了解更多xml的相关内容,可以阅读本专题下面的文章。

5677

2024.08.01

xml是什么格式的文件
xml是什么格式的文件

xml是一种纯文本格式的文件。xml指的是可扩展标记语言,标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。想了解更多相关的内容,可阅读本专题下面的相关文章。

2402

2024.11.28

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3998

2023.08.10

js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

4196

2023.06.20

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1315

2023.07.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

1678

2023.08.03

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

9723

2023.08.17

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

80

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn