通过curl保存的cookie如何设置过期时间?

php中文网
发布: 2016-08-04 09:19:08
原创
2602人浏览过

通过模拟登录保存cookie,然后去后台页面不断抓取某网站上的订单数据。
现在有两个问题

  • 该网站cookie会在10分钟后过期,过期后需要重新登录

  • 该网站的订单数据禁止频繁查询

    存了个图
    存了个图

    视频图片解析/字幕/剪辑,视频高清保存/图片源图提取

    存了个图 17
    查看详情 存了个图

现在要完成这样的功能:

  • 从模拟登录后开始,不断地自动抓取订单数据

  • 当该cookie过期时自动发送消息到管理员微信,提醒管理员重新登录。

那么,如何在模拟登录时,设置保存的cookie过期时间?以及如何设置每隔固定的时间去执行一次抓取数据操作?
因为要对这些数据做处理,有没有办法在本地测试中即可完成这些操作?

回复内容:

通过模拟登录保存cookie,然后去后台页面不断抓取某网站上的订单数据。
现在有两个问题

  • 该网站cookie会在10分钟后过期,过期后需要重新登录

  • 该网站的订单数据禁止频繁查询

现在要完成这样的功能:

  • 从模拟登录后开始,不断地自动抓取订单数据

  • 当该cookie过期时自动发送消息到管理员微信,提醒管理员重新登录。

那么,如何在模拟登录时,设置保存的cookie过期时间?以及如何设置每隔固定的时间去执行一次抓取数据操作?
因为要对这些数据做处理,有没有办法在本地测试中即可完成这些操作?

隔固定时间去执行抓取,可以使用cli模式定时任务。

cookie设置过期时间我觉得没有必要,你可以在接口失效的前提下重新模拟登录。

1该网站的订单数据禁止频繁查询
curl 支持代理请求,他检测是否频繁请求是通过ip来检测的
2该网站cookie会在10分钟后过期,过期后需要重新登录(cookie里面存放了sessionid 主要是这个会话id会过期不是cookie)
按照你的这个情景cookie失效有2种:
----1 会话时长炒超过了服务器配置的会话时长(一般默认30分钟)
----2 用户退出,服务器主动销毁会话sessionid
既然你是要抓数据,那么账号应该是你的, 那么2的可能基本可以排除了,至于1 如果你用curl代理请求那么也就不存在1的问题,如果存在你使用定时请求来保持这个会话sessionid即可(另开一个程序每隔15分钟请求一次来保持会话)

相关标签:
最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号