0

0

如何在 Go 服务器中限制文件上传与下载速率

碧海醫心

碧海醫心

发布时间:2025-12-27 13:51:24

|

259人浏览过

|

来源于php中文网

原创

如何在 Go 服务器中限制文件上传与下载速率

本文介绍使用 `juju/ratelimit` 库结合令牌桶算法,为 http 文件上传和下载添加可配置的速率限制(如 1mb/s),适用于大文件(如 1gb)场景,避免带宽耗尽或服务阻塞。

在 Go 编写的 HTTP 文件服务中,若不对上传/下载流量进行节流,单个大文件传输可能占满服务器带宽,影响其他请求响应甚至导致超时。Go 标准库本身不提供内置限速机制,但可通过包装 io.Reader 和 io.Writer 的方式,在数据流关键路径上插入速率控制器。推荐使用成熟、轻量且线程安全的第三方库 github.com/juju/ratelimit,其基于经典的令牌桶(Token Bucket)算法实现:以恒定速率向桶中注入令牌,每次读/写操作需消耗令牌,从而自然实现平滑限速。

✅ 限速原理简述

  • NewBucketWithRate(fillRate, capacity) 创建一个桶:
    • fillRate:每秒新增令牌数(单位:字节/秒),即目标限速值(如 1 * 1024 * 1024 表示 1MB/s);
    • capacity:桶最大容量(建议 ≥ fillRate,避免初始突发流量被过度抑制)。
  • ratelimit.Reader(r, bucket) 返回一个限速包装的 io.Reader,每次 Read() 前自动等待足够令牌;
  • 同理,ratelimit.Writer(w, bucket) 可用于限速写入(适用于下载响应流)。

?️ 实际集成示例

1. 上传限速(修改 uploadFile)

import (
    "io"
    "net/http"
    "os"
    "github.com/juju/ratelimit"
)

func uploadFile(w http.ResponseWriter, r *http.Request) {
    file, _, err := r.FormFile("file")
    if err != nil {
        http.Error(w, "无法获取上传文件: "+err.Error(), http.StatusBadRequest)
        return
    }
    defer file.Close()

    // 创建限速桶:1MB/s,桶容量 1MB(允许短时突发)
    bucket := ratelimit.NewBucketWithRate(1*1024*1024, 1*1024*1024)

    // 包装上传文件流,实现上传速率限制
    limitedReader := ratelimit.Reader(file, bucket)

    os.MkdirAll(`e:\test`, 0755)
    out, err := os.Create(`e:\test\test.mpg`)
    if err != nil {
        http.Error(w, "无法创建目标文件: "+err.Error(), http.StatusInternalServerError)
        return
    }
    defer out.Close()

    // 使用限速 Reader 进行拷贝
    _, err = io.Copy(out, limitedReader)
    if err != nil {
        http.Error(w, "文件写入失败: "+err.Error(), http.StatusInternalServerError)
        return
    }

    w.WriteHeader(http.StatusOK)
    w.Write([]byte("上传完成,已限速"))
}

2. 下载限速(添加 downloadFile)

func downloadFile(w http.ResponseWriter, r *http.Request) {
    f, err := os.Open(`e:\test\test.mpg`)
    if err != nil {
        http.Error(w, "文件不存在", http.StatusNotFound)
        return
    }
    defer f.Close()

    // 设置响应头
    w.Header().Set("Content-Type", "application/octet-stream")
    w.Header().Set("Content-Disposition", `attachment; filename="test.mpg"`)

    // 创建限速桶(同样 1MB/s)
    bucket := ratelimit.NewBucketWithRate(1*1024*1024, 1*1024*1024)

    // 包装 ResponseWriter 为限速 Writer
    limitedWriter := ratelimit.Writer(w, bucket)

    // 流式传输,自动限速
    _, err = io.Copy(limitedWriter, f)
    if err != nil && err != io.ErrUnexpectedEOF {
        // 忽略客户端提前断开连接(常见于大文件下载中断)
        log.Printf("下载时发生错误: %v", err)
    }
}

⚠️ 注意事项与最佳实践

  • 桶容量选择:capacity 过小会导致频繁等待,增大延迟;过大则削弱限速效果。建议设为 fillRate 的 1–3 倍,平衡平滑性与响应性。
  • 并发安全性:ratelimit.Bucket 是并发安全的,可复用同一个桶控制多个连接(如全局限速),也可为每个请求新建桶实现独立限速(推荐用于用户级配额)。
  • 错误处理:io.Copy 在限速下仍可能因网络中断返回 io.ErrUnexpectedEOF,应忽略该错误(客户端主动断连),仅记录非预期错误。
  • 资源释放:务必确保 file.Close() 和 out.Close() 被调用,避免句柄泄漏;限速包装器不改变底层资源生命周期。
  • 配置化扩展:将速率值(如 1 * 1024 * 1024)提取为变量或从配置文件/环境变量加载,便于动态调整。

通过上述方式,你可以在不修改核心业务逻辑的前提下,精准、低侵入地为 Go Web 服务添加生产级的上传/下载速率控制能力。

启科PHP淘宝客系统
启科PHP淘宝客系统

1、请上传下载到的淘宝客系统安装包并上传到空间根目录中进行解压,解压后将网站文件移动到根目录的位置,然后访问 /install 进行安装。您也可以在本地解压,并以二进制方式将程序上传至您的网站空间。 2、同意启科网络电子商务系统安装协议进入下一步。 3、如果系统检测环境通过,则会提示输入您的数据库服务器地址(一般为本机,即127.0.0.1或者localhost)、数据库账号、数据库密码、数据库名

下载

相关专题

更多
登录token无效
登录token无效

登录token无效解决方法:1、检查token的有效期限,如果token已经过期,需要重新获取一个新的token;2、检查token的签名,如果签名不正确,需要重新获取一个新的token;3、检查密钥的正确性,如果密钥不正确,需要重新获取一个新的token;4、使用HTTPS协议传输token,建议使用HTTPS协议进行传输 ;5、使用双因素认证,双因素认证可以提高账户的安全性。

6030

2023.09.14

登录token无效怎么办
登录token无效怎么办

登录token无效的解决办法有检查Token是否过期、检查Token是否正确、检查Token是否被篡改、检查Token是否与用户匹配、清除缓存或Cookie、检查网络连接和服务器状态、重新登录或请求新的Token、联系技术支持或开发人员等。本专题为大家提供token相关的文章、下载、课程内容,供大家免费下载体验。

778

2023.09.14

token怎么获取
token怎么获取

获取token值的方法:1、小程序调用“wx.login()”获取 临时登录凭证code,并回传到开发者服务器;2、开发者服务器以code换取,用户唯一标识openid和会话密钥“session_key”。想了解更详细的内容,可以阅读本专题下面的文章。

1044

2023.12.21

token什么意思
token什么意思

token是一种用于表示用户权限、记录交易信息、支付虚拟货币的数字货币。可以用来在特定的网络上进行交易,用来购买或出售特定的虚拟货币,也可以用来支付特定的服务费用。想了解更多token什么意思的相关内容可以访问本专题下面的文章。

1066

2024.03.01

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

465

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

465

2023.08.10

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

383

2023.08.14

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

250

2023.11.09

ip地址修改教程大全
ip地址修改教程大全

本专题整合了ip地址修改教程大全,阅读下面的文章自行寻找合适的解决教程。

27

2025.12.26

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Git 教程
Git 教程

共21课时 | 2.2万人学习

Git版本控制工具
Git版本控制工具

共8课时 | 1.5万人学习

Git中文开发手册
Git中文开发手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号