Go语言：高效读取HTTP URL资源内容

resp, err := http.Get("http://example.com/data")
if err != nil {
    // 处理请求发送失败的错误
    // 例如：网络不通、域名解析失败等
    log.Fatalf("Error making GET request: %v", err)
}
// ... 进一步处理resp

resp, err := http.Get("http://example.com/data")
if err != nil {
    log.Fatalf("Error making GET request: %v", err)
}
defer resp.Body.Close() // 确保在函数返回时关闭响应体

package main

import (
    "fmt"
    "io"
    "log"
    "net/http"
)

func main() {
    url := "https://www.example.com" // 替换为你需要读取的URL

    // 1. 发起HTTP GET请求
    resp, err := http.Get(url)
    if err != nil {
        log.Fatalf("请求URL失败: %v", err)
    }
    // 2. 确保在函数退出时关闭响应体
    defer resp.Body.Close()

    // 3. 检查HTTP状态码
    if resp.StatusCode != http.StatusOK {
        log.Fatalf("HTTP请求返回非成功状态码: %s", resp.Status)
    }

    // 4. 从响应体中读取所有数据
    bodyBytes, err := io.ReadAll(resp.Body)
    if err != nil {
        log.Fatalf("读取响应体失败: %v", err)
    }

    // 5. 将字节数据转换为字符串并打印
    fmt.Printf("从URL %s 读取到的内容:\n%s\n", url, string(bodyBytes))
}

// 示例：将URL内容直接写入文件
func downloadFile(filepath string, url string) error {
    resp, err := http.Get(url)
    if err != nil {
        return err
    }
    defer resp.Body.Close()

    if resp.StatusCode != http.StatusOK {
        return fmt.Errorf("bad status: %s", resp.Status)
    }

    out, err := os.Create(filepath)
    if err != nil {
        return err
    }
    defer out.Close()

    _, err = io.Copy(out, resp.Body) // 将响应体直接复制到文件
    return err
}

package main

import (
    "fmt"
    "io"
    "log"
    "net/http"
    "time" // 用于设置超时
)

func main() {
    // 定义要读取的URL
    targetURL := "https://httpbin.org/get" // 这是一个可以返回GET请求信息的测试URL

    // 创建一个自定义的HTTP客户端，并设置超时
    client := &http.Client{
        Timeout: 5 * time.Second, // 设置请求超时为5秒
    }

    fmt.Printf("尝试从URL: %s 读取数据...\n", targetURL)

    // 发起HTTP GET请求
    resp, err := client.Get(targetURL)
    if err != nil {
        // 捕获网络连接、DNS解析、超时等错误
        log.Fatalf("发起GET请求失败: %v", err)
    }

    // 确保在函数退出时关闭响应体，释放资源
    defer func() {
        if closeErr := resp.Body.Close(); closeErr != nil {
            log.Printf("关闭响应体时发生错误: %v", closeErr)
        }
    }()

    // 检查HTTP响应状态码
    if resp.StatusCode != http.StatusOK {
        log.Fatalf("HTTP请求返回非成功状态码: %d - %s", resp.StatusCode, resp.Status)
    }

    // 从响应体中读取所有数据
    // 对于大型响应，考虑使用io.Copy或其他流式处理方式
    bodyBytes, err := io.ReadAll(resp.Body)
    if err != nil {
        log.Fatalf("读取响应体内容失败: %v", err)
    }

    // 将字节切片转换为字符串并打印
    fmt.Println("成功读取到以下内容:")
    fmt.Println(string(bodyBytes))

    // 打印一些响应头信息
    fmt.Println("\n部分响应头信息:")
    fmt.Printf("Content-Type: %s\n", resp.Header.Get("Content-Type"))
    fmt.Printf("Server: %s\n", resp.Header.Get("Server"))
}