python - pyspider怎样传递信息给下一个函数,但是不通过url
淡淡烟草味
淡淡烟草味 2017-05-18 11:00:39
[Python讨论组]

有的时候向通过pyspider直接传递信息给下一个函数,但是没有cral一个新的url的需求。

比如说,一个列表页面某部分信息需要传递给下一个函数,但是不想通过列表的url传递。

想过用send_message的方法来做,还有就是用self.crawl的response.save来做(url随便写一个比较好爬的网站)
但是这两个方法都不是特别好。

请问有什么好的方法吗。

淡淡烟草味
淡淡烟草味

全部回复(2)
ringa_lee

下一个函数已经执行结束了,它已经不存在了,你怎么传递传递信息给一个不存在的东西?

曾经蜡笔没有小新

无非跳转callback, 已出来的数据yield, 不过你还是测试一下.

def detail(self, response):
    next_urls = [i.attr.href for i in response.doc('#fetch urls')]
    for url in next_urls:
        self.crawl(url, callback=self.list_page)
    for i in items = [
        # some result    
    ]
        yield i
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号