Golang如何实现并发下载文件-Golang-PHP中文网

Golang如何实现并发下载文件

P粉602998670

发布： 2025-10-15 17:43:01

原创

434人浏览过

答案：Go语言通过goroutine和channel实现并发下载，先用HEAD请求获取文件大小并分块，每个goroutine通过Range头下载指定字节范围，利用sync.WaitGroup等待所有协程完成，并发写入临时位置后合并，同时加入重试机制和context控制超时，合理设置并发数以提升下载效率。

golang如何实现并发下载文件

Go语言通过goroutine和channel可以轻松实现并发下载文件，提升下载速度并有效利用带宽。核心思路是将文件分成多个部分，每个部分由一个goroutine独立下载，最后合并成完整文件。

1. 获取文件大小并分块

在开始下载前，先发送一个HEAD请求获取文件总大小，这样可以知道如何划分下载区间。

示例代码：

<pre class="brush:php;toolbar:false;">resp, err := http.Head(url)
if err != nil {
    return err
}
fileSize, _ := strconv.Atoi(resp.Header.Get("Content-Length"))

登录后复制

确定并发协程数（如4个），计算每块的大小：

chunkSize := fileSize / concurrency

立即学习“go语言免费学习笔记（深入）”；

2. 并发下载各数据块

每个goroutine负责下载指定字节范围的数据。使用http.NewRequest并设置Range头来实现分段请求。

例如，第i个协程下载范围为 [start, end)：

start := i * chunkSize
end := start + chunkSize - 1
如果是最后一个块，end设为fileSize-1

关键代码片段：

ViiTor实时翻译

AI实时多语言翻译专家！强大的语音识别、AR翻译功能。

116

查看详情

<pre class="brush:php;toolbar:false;">req, _ := http.NewRequest("GET", url, nil)
req.Header.Set("Range", fmt.Sprintf("bytes=%d-%d", start, end))
client := &http.Client{}
resp, _ := client.Do(req)
defer resp.Body.Close()
<p>data := make([]byte, end-start+1)
io.ReadFull(resp.Body, data)</p>

登录后复制

将下载的数据写入对应偏移的临时文件或内存缓冲区，可通过channel将结果传回主协程。