0

0

如何使用Golang提高网络吞吐量_Golang net包性能优化实践

P粉602998670

P粉602998670

发布时间:2026-01-23 14:36:32

|

528人浏览过

|

来源于php中文网

原创

net.Listen 默认 SO_BACKLOG=128 易致连接队列饱和,引发 Connection refused;应调大 net.core.somaxconn 并显式设置 TCPListener backlog。

如何使用golang提高网络吞吐量_golang net包性能优化实践

为什么 net.Listen 默认配置会成为吞吐瓶颈

Go 的 net.Listen 在 Linux 上默认使用 SO_BACKLOG 值为 128(内核限制下实际可能更低),当并发连接突增时,未被 Accept 的连接会堆积在队列里,超限后客户端收到 Connection refused 或长时间 SYN 超时。这不是 Go 本身慢,而是队列满导致连接被丢弃。

  • ss -lnt 观察 Recv-Q 是否持续非零,若接近 net.core.somaxconn 值,说明队列已饱和
  • 启动服务前显式增大监听队列:
    ln, err := net.Listen("tcp", ":8080")
    if err != nil {
        log.Fatal(err)
    }
    // 设置系统级 backlog(需 os.IsPermission 检查)
    if tcpLn, ok := ln.(*net.TCPListener); ok {
        if err := tcpLn.SetDeadline(time.Now().Add(10 * time.Second)); err == nil {
            // 实际生效依赖于 syscall.SetsockoptInt32 和 SO_BACKLOG
            // 更可靠方式:启动前执行 sysctl -w net.core.somaxconn=4096
        }
    }
  • 更稳妥做法是提前调大系统参数:sysctl -w net.core.somaxconn=4096,并确保 /proc/sys/net/core/somaxconn 已生效

如何避免 http.Server 的默认 ReadTimeout 拖垮长连接吞吐

HTTP 服务器启用 ReadTimeout 后,每个连接都会启动一个定时器。高并发下大量定时器触发、GC 扫描 timer heap,反而增加延迟和 CPU 开销——尤其在连接复用(keep-alive)场景下,本该复用的连接被无谓中断。

  • 若业务协议可控(如内部 RPC),直接禁用:
    srv := &http.Server{
        Addr:         ":8080",
        Handler:      myHandler,
        ReadTimeout:  0,   // 关键:禁用读超时
        WriteTimeout: 0,
        IdleTimeout:  30 * time.Second, // 仅控制空闲连接生命周期
    }
  • 若必须做读保护,改用连接粒度的上下文控制,而非全局定时器:http.TimeoutHandler 是 handler 层面的包装,不干扰底层连接复用
  • 注意:禁用 ReadTimeout 后,需确保应用层能主动检测粘包、恶意不发请求的客户端,否则可能泄露 goroutine

net.Conn 复用与缓冲区大小对吞吐的实际影响

每次 conn.Read() 都是一次系统调用,小缓冲区(如默认 4KB)会导致高频 syscall,尤其在处理大 payload 或流式数据时。而过大的缓冲区又浪费内存且延迟响应。

  • 对高吞吐 TCP 服务,建议将 bufio.NewReaderSize(conn, 64*1024) 显式设为 64KB,平衡 syscall 频率与内存占用
  • 避免在循环中反复创建 bufio.Reader:它本身轻量,但频繁 alloc/free 会抬高 GC 压力
  • 若使用 http.Server,它内部已封装缓冲逻辑,无需手动套 bufio;但自定义协议(如 WebSocket 底层帧解析、Redis 协议)必须自己管理缓冲区
  • 实测显示:从 4KB 改为 64KB 缓冲,在千兆网卡 + 10K 并发下,CPU 用户态占比下降约 12%,TPS 提升 18%~22%

为什么 runtime.GOMAXPROCS 设太高反而降低网络吞吐

很多人以为把 GOMAXPROCS 设成 CPU 核数 × 2 就能提升并发能力,但在典型网络服务中,过多的 P 会导致调度器频繁迁移 goroutine、M 在不同 OS 线程间切换开销上升,尤其当 epoll/kqueue 事件分发不均时,部分 P 长时间空转,另一些 P 积压大量就绪 goroutine。

Adobe 官方Flash动画优化指南 pdf版
Adobe 官方Flash动画优化指南 pdf版

来自Adobe官方的Flash动画优化指南教程,包括以下的内容:   • 如何节省内存   • 如何最大程度减小 CPU 使用量   • 如何提高 ActionScript 3.0 性能   • 加快呈现速度   • 优化网络交互   • 使用音频和视频   • 优化 SQL 数据库性能   • 基准测试和部署应用程序   …&hel

下载

立即学习go语言免费学习笔记(深入)”;

  • 建议值:保持 GOMAXPROCS 等于物理 CPU 核数(numa_node 内核数),除非明确有计算密集型子任务混跑
  • go tool trace 观察 Proc 状态:若频繁出现 “idle” 或 “spinning”,说明 P 过多
  • 真正影响吞吐的是 I/O 多路复用效率和 goroutine 处理逻辑的常驻时间,不是 P 的数量。一个阻塞在 conn.Read() 的 goroutine 不消耗 P,只等待 fd 就绪

网络吞吐的瓶颈往往不在代码写法,而在操作系统参数、缓冲区策略和连接生命周期管理这些“看不见”的环节。调优时优先看 ss -igo tool pprof -http/proc/net/softnet_stat,而不是急着加 goroutine。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

180

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

228

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

340

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

209

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

393

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

197

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

191

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

273

2025.06.17

c++空格相关教程合集
c++空格相关教程合集

本专题整合了c++空格相关教程,阅读专题下面的文章了解更多详细内容。

0

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.6万人学习

Git 教程
Git 教程

共21课时 | 2.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号