PHP file_get_contents采集程序开发教程详解

php中文网

发布： 2016-06-08 17:23:50

原创

1748人浏览过

本文章来给各位同学介绍PHP file_get_contents采集程序开发教程详解，有需要了解的朋友可参考。

file_get_contents（）远程文件获取函数，用来获取远程页面内容
preg_match_all（）进行全局正则表达式匹配，匹配多次，用于匹配列表
preg_match （）进行正则表达式匹配，匹配一次，用于匹配终端
preg_replace （）进行正则表达式替换，用于过滤终端

具体步骤

Step 1 获取单页列表和单篇文章内容
在批量采集列表和内容之前，我们先将网站的单页列表和单篇文章的内容采集作为测试正则表达式对错。

列表页采集文章的链接地址：

小邮包包月订购包年程序

小邮包-包月订购包年服务网，该程序由好买卖商城开发，程序采用PHP+MYSQL架设，程序商业模式为目前最为火爆的包月订制包年服务模式，这种包年订购在国外网站已经热火很多年了，并且已经发展到一定规模，像英国的男士用品网站BlackSocks，一年的袜子购买量更是达到了1000万双。功能：1、实现多产品上线，2、不用注册也可以直接下单购买，3、集成目前主流支付接口，4、下单发货均有邮件提醒。

查看详情

代码如下

复制代码

//获取列表
$url = '/s2005/shishi.shtml';
$con=file_get_contents($url);
//写正则获取列表中的文章链接
/*范例：           target='_blank'>湖南沅陵输电工程沉船事故共致6人死亡*/
$preg = "|(.*)|iUs";
// 正则中的/i表示大小写不敏感 /U 非贪婪匹配 /s 点号可以匹配换行符
preg_match_all($preg,$con,$arr);
//var_dump($arr);
    /*
    array(3) {
[0]=>
array(40) {
    [0]=>
    string(126) " target='_blank'>甘肃河西走廊遭大风沙尘侵袭瞬时最大风力9级"
    [1]=>
    string(112) " target='_blank'>一线城市住宅地价全部环比上涨"
    ... ...
    [39]=>
    string(124124) " target='_blank'>湖南衡阳发生一起枪击案致1人死警方正缉凶"
}
[1]=>
array(40) {
    [0]=>
    string(46) "/20130418/n373180618.shtml"
    [1]=>
    string(46) "/20130418/n373180612.shtml"
    ... ...
    [39]=>
    string(46) "/20130418/n373161633.shtml"
}
[2]=>
array(40) {
    [0]=>
    string(42) "甘肃河西走廊遭大风沙尘侵袭瞬时最大风力9级"
    [1]=>
    string(28) "一线城市住宅地价全部环比上涨"
    ... ...
    [39]=>
    string(40) "湖南衡阳发生一起枪击案致1人死警方正缉凶"
}
}
    */
?>