python - Scrapy并没有循环callback是怎么回事?
天蓬老师
天蓬老师 2017-04-17 17:43:57
[Python讨论组]

在get_level2_topics这里并没有循环,不知道哪里出了问题,怎么就跳出了,我在get_level1_topics测试过,可以看到所有的topic_id都有输出。
不知哪里出了问题,请指教!

  • 问题:
    get_level1_topics 循环-> get_level2_topics(并没有循环)

代码如下:

def get_level1_topics(self, response):
    # 计数
    count = 0
    # print topic_ids
    for u in urls:
        yield scrapy.Request(
                 url=self.zhihu_topics_url + u,
                 headers=headers,
                 meta={
                     "proxy": proxy,
                     "cookiejar": response.meta["cookiejar"],
                     # 传递参数topic_id
                     "topic_id": topic_ids[count],
                 },
                 callback=self.get_level2_topics
                 )
        count +=1
        
def get_level2_topics(self, response):
    print response.meta['topic_id']
天蓬老师
天蓬老师

欢迎选择我的课程,让我们一起见证您的进步~~

全部回复(1)
ringa_lee

可能你urls为空,所以不会执行到yield

热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号