微信公众号 讲师中心
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机/移动开发 手机游戏
搜索
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程
自媒体 新闻
首页 > 后端开发 > php教程 > 正文

share一段采集程序的代码

php中文网
发布： 2016-07-25 09:11:20
原创
1149人浏览过
看到总有人问curl的问题，这两天没事写了个采集论坛的小程序。里面包括了模拟登陆，获取页面源代码，正则匹配结果等部分，希望对大家有用。
  1. set_time_limit(0);
  3. //cookie保存目录
  4. $cookie_jar = '/tmp/cookie.tmp';
  6. /*函数------------------------------------------------------------------------------------------------------------*/
  8. //模拟请求数据
  9. function request($url,$postfields,$cookie_jar,$referer){
  10. $ch = curl_init();
  11. $options = array(CURLOPT_URL => $url,
  12. CURLOPT_HEADER => 0,
  13. CURLOPT_NOBODY => 0,
  14. CURLOPT_PORT => 80,
  15. CURLOPT_POST => 1,
  16. CURLOPT_POSTFIELDS => $postfields,
  17. CURLOPT_RETURNTRANSFER => 1,
  18. CURLOPT_FOLLOWLOCATION => 1,
  19. CURLOPT_COOKIEJAR => $cookie_jar,
  20. CURLOPT_COOKIEFILE => $cookie_jar,
  21. CURLOPT_REFERER => $referer
  22. );
  23. curl_setopt_array($ch, $options);
  24. $code = curl_exec($ch);
  25. curl_close($ch);
  26. return $code;
  27. }
  29. //获取帖子列表
  30. function getThreadsList($code){
  31. preg_match_all('/

大家都在看：

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移，垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是，许多工具可以让 Windows 保持平稳运行。

下载
来源：php中文网
收藏 点赞
上一篇：使用 NP-Gravatar 获取 Gravatar 上的头像 下一篇：再次提供一个IP地理位置查询类
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
PHP中高效地将固定数据结构合并到JSON数组的每个对象中 本教程详细介绍了如何在PHP中，将一个预定义的静态数据结构，有效地合并到从数据库或其他源获取的JSON数组的每一个对象中。通过将JSON字符串解码为PHP关联数组，然后迭代每个元素并利用array_merge函数进行合并，最终重新编码为JSON，实现数据结构的批量增强。
2025-11-08 11:03:22
483
PHP中从多维数组累加商品总价的实用指南 本文旨在提供一个全面的教程，详细讲解如何在PHP中从一个包含多个商品详情（如价格和数量）的嵌套数组中计算出总销售额。我们将探讨两种主要方法：仅累加商品价格，以及同时考虑商品数量进行累加，并提供相应的代码示例。此外，还将讨论数据类型转换、浮点数精度以及如何将计算结果存储以供后续使用。
2025-11-08 10:45:19
865
PHP与jQuery AJAX交互：实现表单提交及服务端JSON响应处理 本教程详细指导如何使用jQueryAJAX发送表单数据，并在PHP后端处理后返回JSON格式的响应。核心内容包括客户端AJAX请求的构建、PHP后端正确生成并输出JSON数据，以及客户端AJAX成功回调函数中解析并利用这些JSON响应，从而实现前后端高效的消息交互。
2025-11-08 10:39:11
420
解决Laravel项目推送到GitHub后文件不显示的问题 本文旨在解决Laravel项目推送到GitHub后，仅显示README文件而其他目录内容缺失的问题。核心原因通常是Git操作不当或.gitignore配置导致文件未被正确跟踪和推送。教程将详细指导如何通过正确的gitadd、gitcommit和gitpush命令，确保所有必要的项目文件被完整上传至GitHub仓库，并提供相关注意事项，帮助开发者有效管理Laravel项目的版本控制。
2025-11-08 10:34:01
455
从下拉菜单获取选中值并结合模态框进行表单提交确认的教程 本教程详细讲解如何利用JavaScript和Bootstrap模态框，在提交表单前获取下拉菜单的选中值，并将其动态显示在确认模态框中。用户确认后，再通过POST方法提交包含选中值的表单，从而实现一个带有用户交互确认机制的表单提交流程。
2025-11-08 09:42:19
704
解决 Laravel Tinker 中工厂方法创建数据时的常见问题与解决方案 本文旨在探讨在使用LaravelTinker通过工厂方法创建数据时可能遇到的错误，特别是当应用代码发生变更后Tinker未能及时反映的问题。我们将详细分析错误原因，并提供切实可行的解决方案，包括重启Tinker环境以及优化工厂定义，以确保开发流程的顺畅与数据创建的准确性。
2025-11-08 09:16:01
790
PHP表单数据更新后显示：解决重定向导致的数据丢失问题 本文旨在解决PHP表单在数据更新后重定向时，因请求方法切换（POST到GET）导致页面无法显示最新数据的常见问题。文章详细阐述了通过会话（Session）管理用户ID的解决方案，确保数据在页面刷新后依然正确加载并显示，并强调了SQL注入防护等最佳实践，提升用户体验和系统稳定性。
2025-11-08 08:22:13
373
php代码API接口响应慢怎么优化_php代码API接口性能优化与调用加速方法 优化PHPAPI响应需从代码、数据库、缓存、网络和监控多方面入手：1.提升代码效率，使用OPcache、避免循环查库；2.优化数据库查询，加索引、用预处理、引入连接池；3.启用Redis等缓存机制，减少重复计算；4.压缩传输内容、异步处理任务；5.使用XHProf、慢查询日志等工具定位瓶颈，先测量后优化。
2025-11-07 14:41:04
155
php怎么用echo_PHP echo语句输出内容与变量方法 答案：echo语句用于输出文本、变量、表达式及HTML标签。可输出纯文本如"HelloWorld"；显示变量值如$name；用句点或双引号连接文本与变量；以逗号分隔输出多个表达式；还可输出带HTML标签的内容控制页面结构。
2025-11-07 14:37:02
151
为什么PHP调用缓存同步函数失效_PHP缓存同步函数失效问题排查与分布式缓存教程 缓存同步函数失效通常由配置错误、环境差异或分布式节点不同步导致。首先确认缓存类型与清除函数匹配，如OPcache需用opcache_reset()，APCu用apcu_clear_cache()，文件状态缓存用clearstatcache()；检查php.ini中相关配置是否启用，如opcache.enable=1；注意CLI与Web环境差异，某些缓存仅在WebSAPI生效；排查权限限制，部分共享主机禁用缓存清理函数；在多节点部署中，单节点操作无法同步全局，需采用集中式缓存（如Redis）、发布
2025-11-07 14:15:02
763
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部