0

0

Go 中实现选择性重定向跟随:捕获中间 URL 并安全终止跳转链

心靈之曲

心靈之曲

发布时间:2026-01-06 20:05:18

|

918人浏览过

|

来源于php中文网

原创

Go 中实现选择性重定向跟随:捕获中间 URL 并安全终止跳转链

本文介绍如何在 go 的 `http.client` 中通过自定义 `checkredirect` 函数,既保留重定向过程中的有效响应(如付费墙前的原始目标 url),又主动中止危险跳转(如进入 paywall 域),无需手动实现 `roundtripper`。

在 Go 的 HTTP 客户端中,CheckRedirect 回调函数常被误认为仅用于“放行”或“拒绝”重定向——实际上,它返回任意非 nil 错误时,Client.Get() 并不会静默失败,而是会返回*上一次成功请求得到的 `http.Response** 以及该错误(包装为*url.Error`)。这一行为是 Go 标准库明确承诺的特性,使我们能优雅地“截断”重定向链,同时获取关键中间 URL(例如短链接展开后、但尚未跳入付费页前的真实地址)。

以下是一个生产就绪的实践示例,展示了如何基于主机名黑名单提前终止重定向,并安全提取最终可达 URL:

package main

import (
    "errors"
    "fmt"
    "io"
    "net/http"
    "net/url"
    "strings"
)

// 自定义错误类型,用于标识“应中止且非异常”的重定向
var ErrPaywalled = errors.New("redirect blocked: would land on paywall")

// 需拦截的敏感域名(支持子域名匹配)
var blockedHosts = map[string]struct{}{
    "registration.ft.com": {},
    "paywall.example.com": {},
}

func isBlockedHost(host string) bool {
    for blocked := range blockedHosts {
        if strings.HasSuffix(host, blocked) || host == blocked {
            return true
        }
    }
    return false
}

var client = &http.Client{
    CheckRedirect: func(req *http.Request, via []*http.Request) error {
        // ✅ 防循环重定向(生产环境必备)
        if len(via) > 10 {
            return fmt.Errorf("too many redirects")
        }
        // ✅ 检查即将跳转的目标是否在黑名单中
        if isBlockedHost(req.URL.Host) {
            return ErrPaywalled
        }
        return nil // 允许继续重定向
    },
}

func ResolveURL(target string) (*url.URL, error) {
    resp, err := client.Get(target)
    defer func() {
        if resp != nil && resp.Body != nil {
            io.Copy(io.Discard, resp.Body) // 清理响应体
            resp.Body.Close()
        }
    }()

    // ✅ 关键逻辑:区分“预期中止”与真实错误
    if urlErr, ok := err.(*url.Error); ok {
        if urlErr.Err == ErrPaywalled {
            // 成功捕获了付费墙前的 URL!返回上一次请求的 URL(即 resp.Request.URL)
            return resp.Request.URL, nil
        }
        // 其他 url.Error 视为真实错误
        return nil, err
    }
    if err != nil {
        return nil, err
    }

    // 无重定向或全部重定向均通过 → 返回最终 URL
    return resp.Request.URL, nil
}

func main() {
    finalURL, err := ResolveURL("http://on.ft.com/14pQBYE")
    if err != nil {
        fmt.Printf("Resolution failed: %v\n", err)
        return
    }
    fmt.Printf("Resolved to: %s\n", finalURL.String())
}

注意事项与最佳实践:

GentleAI
GentleAI

GentleAI是一个高效的AI工作平台,为普通人提供智能计算、简单易用的界面和专业技术支持。让人工智能服务每一个人。

下载
  • 必须检查重定向循环:via 参数包含已执行的请求链,长度超限(如 >10)应主动报错,避免无限重定向导致资源耗尽;
  • 主机匹配建议用 strings.HasSuffix:支持 www.ft.com → registration.ft.com 这类子域场景,比精确匹配更鲁棒;
  • 始终关闭 resp.Body:即使重定向被中止,resp 仍有效,不关闭会导致连接泄漏;
  • 错误处理需显式解包:*url.Error 的 Err 字段才是你 CheckRedirect 返回的原始错误,直接比较即可;
  • ⚠️ 不要依赖 resp.StatusCode 判断:某些短链服务返回 302 但 Body 为空,真正目标 URL 只存在于 Location Header 或 resp.Request.URL 中。

通过此方案,你既能复用 Go 标准 http.Client 的健壮性与连接复用能力,又能精准控制重定向边界,在爬虫、链接预览、反短链等场景中兼顾效率与安全性。

相关专题

更多
scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

184

2023.10.18

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

271

2023.10.25

location.assign
location.assign

在前端开发中,我们经常需要使用JavaScript来控制页面的跳转和数据的传递。location.assign就是JavaScript中常用的一个跳转方法。通过location.assign,我们可以在当前窗口或者iframe中加载一个新的URL地址,并且可以保存旧页面的历史记录。php中文网为大家带来了location.assign的相关知识、以及相关文章等内容,供大家免费下载使用。

224

2023.06.27

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

303

2023.11.09

http请求415错误怎么解决
http请求415错误怎么解决

解决方法:1、检查请求头中的Content-Type;2、检查请求体中的数据格式;3、使用适当的编码格式;4、使用适当的请求方法;5、检查服务器端的支持情况。更多http请求415错误怎么解决的相关内容,可以阅读下面的文章。

396

2023.11.14

HTTP 503错误解决方法
HTTP 503错误解决方法

HTTP 503错误表示服务器暂时无法处理请求。想了解更多http错误代码的相关内容,可以阅读本专题下面的文章。

1399

2024.03.12

http与https有哪些区别
http与https有哪些区别

http与https的区别:1、协议安全性;2、连接方式;3、证书管理;4、连接状态;5、端口号;6、资源消耗;7、兼容性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1850

2024.08.16

PPT动态图表制作教程大全
PPT动态图表制作教程大全

本专题整合了PPT动态图表制作相关教程,阅读专题下面的文章了解更多详细内容。

13

2026.01.07

c++ Libcurl用法详解
c++ Libcurl用法详解

本专题整合了c++ Libcurl用法详解,阅读专题下面的文章了解更多详细内容。

0

2026.01.07

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 3.4万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号