文章专题 AI工具学习下载问答源码最近更新

PHP

会员中心讲师中心微信公众号

首页 > 后端开发 > php教程 > 正文

PHP文章采集URL补全函数(FormatUrl)_php实例

php中文网

发布： 2016-05-17 09:09:58

原创

1263人浏览过

写采集必用的函数，URL补全函数，也可叫做FormatUrl。
写此函数作用就是为了开发采集程序，采集文章的时候会经常遇到页面里的路径是 “相对路径” 或者 “绝对根路径” 不是“绝对全路径”就无法收集URL。

所以，就需要本功能函数进行对代码进行格式化，把所有的超链接都格式化一遍，这样就可以直接收集到正确的URL了。

路径知识普及
相对路径：“../” “./” 或者前面什么都不加
绝对根路径：/path/xxx.html
绝对全路径：http://www.xxx.com/path/xxx.html
使用实例：

复制代码代码如下:

$surl="http://www.jb51.net/";
$gethtm = '首页解决方案';
echo formaturl($gethtm,$surl);
?>

输出：首页解决方案
--------- 演示实例 ------------
原始路径代码：http://www.newnew.cn/newnewindex.aspx
输出演示代码：http://www.maifp.com/aaa/test.php
以下是函数代码

复制代码代码如下:

function formaturl($l1,$l2){
if (preg_match_all("/( PHP文章采集URL补全函数(FormatUrl)_php实例

PHP文章采集URL补全函数(FormatUrl)_php实例

]+src="([^"]+)"[^>]*>)|(]+href="([^"]+)"[^>]*>)|( PHP文章采集URL补全函数(FormatUrl)_php实例

PHP文章采集URL补全函数(FormatUrl)_php实例

]+src='([^']+)'[^>]*>)|(]+href='([^']+)'[^>]*>)/i",$l1,$regs)){
foreach($regs[0] as $num => $url){
$l1 = str_replace($url,lIIIIl($url,$l2),$l1);
}
}
return $l1;
}
function lIIIIl($l1,$l2){
if(preg_match("/(.*)(href|src)=(.+?)( |/>|>).*/i",$l1,$regs)){$I2 = $regs[3];}
if(strlen($I2)>0){
$I1 = str_replace(chr(34),"",$I2);
$I1 = str_replace(chr(39),"",$I1);
}else{return $l1;}
$url_parsed = parse_url($l2);
$scheme = $url_parsed["scheme"];if($scheme!=""){$scheme = $scheme."://";}
$host = $url_parsed["host"];
$l3 = $scheme.$host;
if(strlen($l3)==0){return $l1;}
$path = dirname($url_parsed["path"]);if($path[0]=="\"){$path="";}
$pos = strpos($I1,"#");
if($pos>0) $I1 = substr($I1,0,$pos);
//判断类型
if(preg_match("/^(http|https|ftp):(//|\\)(([w/\+-~`@:%])+.)+([w/\.=?+-~`@':!%#]|(&)|&)+/i",$I1)){return $l1; }//http开头的url类型要跳过
elseif($I1[0]=="/"){$I1 = $l3.$I1;}//绝对路径
elseif(substr($I1,0,3)=="../"){//相对路径
while(substr($I1,0,3)=="../"){
$I1 = substr($I1,strlen($I1)-(strlen($I1)-3),strlen($I1)-3);
if(strlen($path)>0){
$path = dirname($path);
}
}
$I1 = $l3.$path."/".$I1;
}
elseif(substr($I1,0,2)=="./"){
$I1 = $l3.$path.substr($I1,strlen($I1)-(strlen($I1)-1),strlen($I1)-1);
}
elseif(strtolower(substr($I1,0,7))=="mailto:"||strtolower(substr($I1,0,11))=="javascript:"){
return $l1;
}else{
$I1 = $l3.$path."/".$I1;
}
return str_replace($I2,""$I1"",$l1);
}
?>

下面的链接是学习PHP正则表达式的地方。在这里留个链接，防止丢失。。。

PHP速学教程(入门到精通)

PHP速学教程(入门到精通)

PHP怎么学习？PHP怎么入门？PHP在哪学？PHP怎么学才快？不用担心，这里为大家提供了PHP速学教程(入门到精通)，有需要的小伙伴保存下载就能学习啦！

来源：php中文网

上一篇：PHP最常用的2种设计模式工厂模式和单例模式介绍_php技巧下一篇：php调用dll的实例操作动画与代码分享_php实例

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn

最新问题

PHP怎样处理文件权限 PHP文件权限设置的注意事项 PHP处理文件权限的核心在于理解Linux/Unix权限模型，使用chmod()、chown()、chgrp()函数操作权限，但需注意umask影响；1.chmod()用于修改文件权限，但受umask限制；2.chown()和chgrp()用于更改所有者和用户组；3.PHP无法写入文件常见原因包括权限不足、SELinux/AppArmor限制、目录权限配置错误、所有者不匹配及磁盘问题；4.安全上传文件应设置严格权限（如0600）、禁用执行、过滤文件名并定期清理；5.跨平台权限差异可通过is_re

2025-06-15 12:53:58

395

PHP怎样处理XML-RPC调用处理XML-RPC的5个完整步骤 PHP处理XML-RPC调用需5个步骤：1.接收XML数据：使用file_get_contents('php://input')获取原始POST数据，不受Content-Type限制；2.解析XML数据：推荐simplexml_load_string()或DOMDocument解析，注意编码一致性；3.提取方法和参数：从和标签中获取方法名及参数，识别参数类型；4.调用PHP函数：通过白名单机制映射方法名到PHP函数，防止安全漏洞；5.构建XML响应：按XML-RPC格式返回结果或错误信息，确保编

2025-06-14 12:00:03

331

PHP邮件发送：PHPMailer配置方法掌握PHPMailer的配置是解决PHP邮件发送问题的关键。1.下载并引入PHPMailer文件，确保路径正确；2.实例化对象并设置字符编码、启用SMTP；3.配置SMTP服务器地址、端口、加密方式和认证信息；4.设置发件人、收件人及回复地址；5.编写HTML或纯文本格式的邮件内容并添加附件；6.调用send()方法发送邮件并处理异常。常见问题如SMTP连接失败需检查Host、Port和SMTPSecure配置，SMTP认证失败应确认账号密码及邮箱授权码设置，邮件被识别为垃圾邮件可添加SPF和D

2025-06-14 10:57:02

458

PHP怎样解析Mach-O可执行文件 Mach-O文件解析技巧分享使用PHP解析Mach-O文件的关键在于理解其结构并通过unpack函数读取二进制数据。1.Mach-O由Header、LoadCommands和Data组成；2.使用pack/unpack函数读取文件头，根据魔数判断32位或64位格式；3.解析LoadCommands需遍历每个命令头部，并按类型解析内容；4.提取代码段需定位LC_SEGMENT类型的__TEXT段，依据fileoff和filesize读取数据；5.加密文件需识别LC_ENCRYPTION_INFO并借助外部工具解密；6.可调用

2025-06-14 09:54:02

969

PHP跨域请求：CORS处理指南跨域请求问题可通过设置CORS头解决，具体步骤如下：1.在PHP脚本中添加Access-Control-Allow-Origin指定允许的域名或使用*（仅限开发环境）；2.设置Access-Control-Allow-Methods定义允许的HTTP方法；3.配置Access-Control-Allow-Headers指定允许的请求头；4.确保服务器启用必要模块如Apache的mod\_headers或正确配置反向代理；5.正确处理OPTIONS预检请求；6.若需携带Cookie，设置Acces

2025-06-14 09:39:01

166

PHP如何调用CMake构建使用PHP执行CMake的3个示例 PHP调用CMake构建的核心方式是通过exec()、shell_exec()、system()等函数执行系统命令，但需注意权限控制、参数安全与错误处理。1.使用exec()或类似函数执行cmake命令进行配置与构建，确保路径正确并创建构建目录；2.传递参数时使用escapeshellarg()转义或白名单验证以防止命令注入；3.权限问题可通过修改目录权限、配置sudoers或使用setfacl解决；4.错误处理应检查返回码、捕获输出、记录日志并提供友好提示，推荐使用proc_open()实现实

2025-06-13 23:39:01

890

PHP怎样处理GraphQL突变 GraphQL数据变更操作技巧 GraphQL突变在PHP中用于执行创建、更新或删除数据等变更操作。1.定义Schema中的突变类型，包括名称、参数和返回值类型；2.实现Resolver函数，处理业务逻辑并与突变关联；3.创建脚本接收并解析GraphQL请求，执行对应Resolver；4.注重安全性，如输入验证、身份认证、速率限制及错误处理；5.优化性能，如批量处理、数据库事务、缓存及查询优化；6.实现文件上传需自定义Upload类型并在Resolver中处理文件。通过以上步骤可构建安全高效的GraphQLAPI。

2025-06-13 21:54:01

599

PHP中getcwd和__DIR__的目录获取区别 getcwd()和DIR的主要区别在于：getcwd()返回PHP脚本执行时的当前工作目录，而DIR返回的是当前脚本所在的目录。1.getcwd()获取的是当前PHP进程的工作目录，这个目录可以通过chdir()动态改变；2.DIR是魔术常量，返回脚本所在目录，静态且编译时确定。例如，在index.php中使用chdir('includes')改变工作目录后，getcwd()返回的是/var/www/html/includes，而DIR返回的是/var/www/html；3.在config.ph

2025-06-13 19:36:01

593

PHP中array()和[]定义数组的区别 PHP中array()和[]的主要区别在于语法和版本支持。1.array()函数适用于所有PHP版本，兼容性强；2.[]是PHP5.4引入的简写语法，更简洁但仅支持PHP5.4及以上版本；3.两者性能差异可忽略不计，选择应基于代码风格和项目需求；4.为提高可读性和维护性，建议在同一个项目中保持语法一致；5.编写需跨版本移植或维护老旧项目时，推荐使用array()函数。

2025-06-13 17:39:01

495

PHP文件压缩：ZipArchive使用使用ZipArchive类压缩PHP文件可有效减小体积便于传输。具体步骤如下：1.使用RecursiveDirectoryIterator遍历目录并筛选PHP文件；2.通过ZipArchive对象创建或打开zip文件；3.将过滤后的PHP文件添加到压缩包中；4.关闭ZipArchive完成压缩。对于大型项目，可通过分批处理减少内存占用；排除特定文件则可在遍历过程中加入条件判断；解压时调用extractTo方法或使用第三方工具；优化压缩率可设置ZipArchive的压缩级别，或在压缩前精简代码。其

2025-06-13 15:30:02

569

相关专题

更多>

热门推荐

开源免费商场系统

广告

热门教程

更多>

相关推荐

热门推荐

最新课程

ThinkPHP5快速开发企业站点[全程实录]

399644次学习
收藏
PHP Workerman 基础与实战：即时通讯聊天系统（ThinkPHP6）

51326次学习
收藏
Thinkphp3.2.3个人博客开发

212743次学习
收藏

最新下载

更多>

网站特效

网站源码

网站素材

前端模板

关于我们免责申明意见反馈讲师合作广告合作最新更新: php中文网：公益在线php培训，帮助PHP学习者快速成长！; 关注服务号技术交流群

PHP中文网订阅号: 每天精选资源文章推送

PHP中文网APP: 随时随地碎片化学习

PHP中文网抖音号: 发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

PHP学习

技术支持

返回顶部