python - Scrapy如何爬取多个不同页面?
PHPz
PHPz 2017-04-18 09:26:21
[Python讨论组]
PHPz
PHPz

学习是最好的投资!

全部回复(2)
黄舟

如果a,b是独立的,就分两个spider,一个spider是可以用多个item的,如果有需要的话。

怪我咯

如果是两个独立的目标网站,分开写会比较灵活一点。
如果是同一个网站,假定你分别有两个item:itema, itemb, 有很多url要爬取,这些url能在两个item的解析都获取到,你获取了url后就yield新的请求就可以了。

热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号