讲师中心 微信公众号
AI工具推荐 视频效率加速

怎么在VSCode终端运行爬虫类Node.js项目

风墨大大_2070

风墨大大_2070

发布时间:2026-10-20 10:51:02

|

618人浏览过

|

来源于php中文网

原创

VSCode终端“找不到模块”主因是工作目录非项目根,Node.js仅在当前及祖先目录查找node_modules;需确认左下角路径含package.json,用cd切换至正确目录,或通过npm start运行(已配环境),避免直接node xxx.js。

怎么在vscode终端运行爬虫类node.js项目

终端里 node 命令报错“找不到模块”?先确认工作目录

VSCode 终端默认启动路径是当前打开的文件夹(即工作区根目录),不是你写爬虫脚本的子目录。如果 package.json 和 node_modules 在 ./src 或 ./crawler 里,而你在根目录下执行 node index.js,Node 就找不到 require 的包——因为 node_modules 不在当前目录或其祖先路径中。

实操建议:

chartjs-reporter
chartjs-reporter

此技能用于在用户需要将结构化数据(查询结果、CSV 摘要、JSON 记录或 Python 字典/列表)转换为独立的 HTML 页面时使用。

下载
  • 在 VSCode 左下角点击当前路径,快速跳转到含 package.json 的目录;或用 cd ./crawler 切过去
  • 运行 npm start 比直接 node xxx.js 更可靠,因为 scripts.start 通常已配好入口和环境
  • 检查 package.json 中 "main" 字段是否指向正确入口文件(比如 "main": "index.js")

node 运行时报 ERR_REQUIRE_ESM?ESM 和 CommonJS 混用要小心

很多爬虫库(如 puppeteer、cheerio 最新版)已默认发布为 ESM 模块,而你的主文件若用 require() 加载它们,就会触发这个错误。这不是路径问题,是模块系统不匹配。

实操建议:

  • 看报错堆栈里哪一行出的错:如果是 require('puppeteer'),说明你在 CommonJS 环境里加载了 ESM 包
  • 两种解法任选其一:
    – 改用 import 语法,并在 package.json 加 "type": "module";
    – 或降级使用支持 CommonJS 的旧版(如 puppeteer@19.11.1),但注意安全与维护性
  • 临时验证:在终端运行 node --version,确保 ≥ v14.13(ESM 基础支持),但别指望它自动兼容混合写法

爬虫跑着就卡住或没输出?检查终端编码和代理设置

VSCode 内置终端(尤其是 Windows 的 PowerShell 或 CMD)有时会因字符编码或代理策略拦截 HTTP 请求,表现为 axios 或 node-fetch 卡在 pending,控制台无任何日志,连 console.log('start') 都不打印。

实操建议:

  • 在终端执行 chcp 65001(Windows)强制 UTF-8,避免中文路径/参数解析失败
  • 如果用了公司网络或设置了系统代理,加环境变量再运行:NODE_OPTIONS=--no-proxy node index.js 或 http_proxy= https_proxy= node index.js
  • 加一句 process.env.NODE_TLS_REJECT_UNAUTHORIZED = '0';(仅测试环境)绕过自签名证书问题,但别提交到代码库

想让爬虫后台持续跑?别依赖 VSCode 终端窗口

VSCode 关闭、切换标签、甚至终端被误点清屏,都会中断正在运行的 node 进程。爬虫类任务往往需要几小时甚至跨天,靠终端直连不可靠。

实操建议:

  • 用 pm2 管理:全局安装后,进项目目录运行 pm2 start index.js --name my-crawler,进程就脱离终端存活
  • Windows 用户可用 node-windows 把脚本注册成系统服务,比手动开 cmd 窗口稳定得多
  • 如果只是调试阶段不想关终端,至少加个 try/catch + process.on('uncaughtException'),防止一次请求失败导致整个进程退出
真正容易被忽略的是:VSCode 终端本身没有独立的 Node.js 版本管理逻辑。你看到的 node -v 结果,完全取决于系统 PATH 里的第一个 node 可执行文件——它可能和你用 nvm/nvs 切换的版本不一致,也可能和 CI 环境不同。跑爬虫前,先确认终端里 which node(macOS/Linux)或 where node(Windows)输出的路径对不对。

热门AI工具

更多
墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
node.js调试
node.js调试

node.js调试可以使用console.log()输出调试信息、断点调试和第三方调试工具。详细介绍:1、console.log()输出调试信息,通过在代码中插入console.log()语句,开发人员可以在控制台输出变量的值、函数的执行结果等信息,以便观察代码的执行流程和状态;2、断点调试,可以在代码中设置断点,以便在特定位置暂停代码的执行,观察变量的值和执行流程等。

10769

2023.09.19

JavaScript 全栈开发基础(Node.js + 前端)
JavaScript 全栈开发基础(Node.js + 前端)

本专题系统介绍 JavaScript 在全栈开发中的核心知识结构,涵盖 Node.js 基础、Express/Koa 接口构建、前端交互设计、模块化与包管理、数据库连接、前后端数据通信与部署流程。通过完整项目示例,帮助学习者掌握从浏览器到服务器的一体化开发能力,实现真正意义上的全栈入门。

434

2025.11.26

Node.js后端开发与Express框架实践
Node.js后端开发与Express框架实践

本专题针对初中级 Node.js 开发者,系统讲解如何使用 Express 框架搭建高性能后端服务。内容包括路由设计、中间件开发、数据库集成、API 安全与异常处理,以及 RESTful API 的设计与优化。通过实际项目演示,帮助开发者快速掌握 Node.js 后端开发流程。

761

2026.02.10

JavaScript Node.js流处理与高效数据管道构建实践
JavaScript Node.js流处理与高效数据管道构建实践

本专题聚焦 Node.js 在大规模数据处理场景中的应用,系统讲解 Stream 流机制、背压控制、管道(Pipe)处理以及文件与网络数据流的高效传输方式。内容包括可读流、可写流、双工流与转换流的实现原理,并结合实际案例构建高性能数据处理管道,帮助开发者提升数据处理效率与系统吞吐能力。

324

2026.04.07

TypeScript Node.js 全栈工程化与Monorepo架构实践
TypeScript Node.js 全栈工程化与Monorepo架构实践

本专题围绕 TypeScript 在 Node.js 全栈开发中的工程化实践展开,系统讲解 Monorepo 架构设计、包管理策略、模块复用机制以及服务端与前端统一类型系统的构建方法。通过真实项目案例,帮助开发者提升大型全栈项目的可维护性与协作效率。

618

2026.06.16

vscode是什么_vscode怎么安装配置
vscode是什么_vscode怎么安装配置

VS Code(Visual Studio Code)是一款免费、开源的跨平台代码编辑器,由微软开发和维护。它被广泛用于软件开发和编程,支持多种编程语言和框架。VS Code 同时提供了丰富的功能和扩展性,使开发者可以高效地编写、编辑和调试代码。

1395

2023.06.30

vscode怎么运行代码
vscode怎么运行代码

vscode是一个运行于MacOS X、Windows和Linux之上的,针对于编写现代Web和云应用的跨平台源代码编辑器;vscode免费而且功能强大,对JavaScript和NodeJS的支持非常好,自带很多功能,例如代码格式化,代码智能提示补全、Emmet插件等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2932

2023.07.21

vscode使用的框架介绍
vscode使用的框架介绍

VSCode是一款跨平台代码编辑器,它基于Electron框架和Monaco Editor构建。想了解更多vscode的相关内容,可以阅读本专题下面的文章。

1989

2024.03.14

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

80

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn