用PHP如何抓取.NET开发的分页控件的数据?

php中文网
发布: 2016-06-23 13:25:02
原创
1249人浏览过

比如在
http://121.28.49.84:8003/
以上网页,左边任选一个企业,点击右侧顶部的“监测数据”,可以看到它是用.net控件做的分页,监控网络请求发现其每次都回发整个网页,且带有viewstate的值,很难模拟。而且采用了updatepanel控件,并非向其他接口请求数据。
我的目的是想自动抓取右侧的监测数据,请问有什么办法可以实现抓取这个页面的分页所有数据?
p.s.服务器环境是lamp

SpeakingPass-打造你的专属雅思口语语料
SpeakingPass-打造你的专属雅思口语语料

使用chatGPT帮你快速备考雅思口语,提升分数

SpeakingPass-打造你的专属雅思口语语料 25
查看详情 SpeakingPass-打造你的专属雅思口语语料


回复讨论(解决方案)

他 就是 AJAX  获取数据,你找到那个AJAX URL连接就可以了,其他根据传参 来的

他的AJAX是用.NET控件的UpdatePanel,实际上是向当前页面自身去请求,这样会导致整个页面的postback,并非是请求另外一个接口地址。
向自身请求时,viewstate非常复杂和难以拼写,而且我通过PHP外部提交的貌似还通不过验证,不知道是哪里的问题。

他的AJAX是用.NET控件的UpdatePanel,实际上是向当前页面自身去请求,这样会导致整个页面的postback,并非是请求另外一个接口地址。
向自身请求时,viewstate非常复杂和难以拼写,而且我通过PHP外部提交的貌似还通不过验证,不知道是哪里的问题。


看它的返回数据就知道了,每次将返回的数据再提交上去。

抓取上一个页面,获取数据的同时要获取_viewstate 和_E开头的两个值,拿到这两个值才能继续下一页抓取。没办法多线程抓取了。不知道微软为何有这样的傻Ⅹ设计。这两个值通常都很长,服务器资源是节省了,但是很浪费网络资源很影响用户体验。

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号