开源中国个人帐号信息抓取实例

php中文网

发布： 2016-07-25 08:49:13

原创

923人浏览过

开源中国个人帐号信息抓取实例，代码供参考，简单改进，可快速制作一个命令行管理自己帐号的工具。
实例使用snoopy,simple_html_dom包，可直接在开源中国进行下载。。。。

//需要调用到php包，从oschina中检索下载则可
include "Snoopy.class.php"; // 抓取网页信息，支持通过http代码方式，
include "simple_html_dom.php"; //html分析包
$snoopy = new Snoopy;
// $snoopy->proxy_host="###";
// $snoopy->proxy_port="8888";
// $snoopy->user="***";
// $snoopy->pass="****";
$snoopy->agent = "(Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:24.0) Gecko/20131117 Firefox/24.0 PaleMoon/24.1.2)";
$snoopy->referer = "http://www.oschina.net/";
$snoopy->cookies["oscid"] = '******';
$snoopy->fetch("https://www.oschina.net/home/login?goto_page=http%3A%2F%2Fwww.oschina.net%2F");
//认证需要认证才能有权限获取到数据
$submit_url = "http://www.oschina.net/action/user/hash_login";
$submit_vars["email"] = "*****";
$submit_vars["pwd"] = SHA1("*******");
$submit_vars["save_login"] = 1;
$submit_vars["submit"] = "现在登录";
$snoopy->submit($submit_url,$submit_vars);
echo "认证情况\n";
// print $snoopy->results;
//认证通过后，开始获取数据
$snoopy->fetch("http://my.oschina.net/******/admin/inbox");
echo "开源中国个人帐号信息测试程序\n";
echo "时间:".date("Y-m-d h:i:s")."\n";
// echo iconv("UTF-8","GBK//IGNORE",$snoopy->results);
$result=$snoopy->results;
// print $result;
//simple_html_dom解释包使用实例
$SHTML=new simple_html_dom();
$html = str_get_html($result);
$messS=$html->find('ul.Msgs li[id]');
foreach($messS as $mess){
$aT=$SHTML->load($mess);
echo "===================\n";
echo $aT."\n";
echo "-----------\n下面是上面html信息的分析提取处理:\n";
echo '信息id: '.$aT->find('li[id]',0)->id.''."\n";
echo '信息: '.trim($aT->find('div.msg',0)->plaintext)."\n";
echo '日期: '.trim($aT->find('div.bottom span.date',0)->plaintext).' '."\n";
print("===================\n");
}

复制代码

大家都在看：

PHP字符串转JSON数组怎么处理_PHP字符串转JSON中数组的转换方法 PHP地址怎么生成_PHP地址动态生成的代码实现与逻辑 PHP格式化日期为中文格式怎么操作_PHP格式化日期为中文格式的详细步骤 php代码前端资源合并压缩怎么优化_php代码资源合并压缩工具与加载性能优化方法如何下载php集成测试文件_获取php集成测试相关文件的方法