http download golang

在现今互联网时代，网络通信已经成为我们日常生活中必不可少的一部分。而在网络通信中，文件的传输无疑占据着重要地位。很多时候，我们需要通过HTTP协议下载远程服务器上的文件来完成某些任务。那么，在Golang中如何实现HTTP下载呢？接下来将介绍如何使用Golang进行HTTP下载。

使用net/http进行基本的HTTP下载

Golang内置的net/http包提供了一套完善的HTTP客户端和服务器功能，使得我们可以方便地进行HTTP请求和响应的处理。下面是一个简单的示例代码，展示了如何使用net/http包进行基本的HTTP下载。

package main

import (
    "fmt"
    "io"
    "net/http"
    "os"
)

func main() {
    // 创建一个文件用于保存下载的内容
    file, err := os.Create("output.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    // 发起HTTP GET请求
    response, err := http.Get("http://example.com/file.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    defer response.Body.Close()

    // 将下载的内容写入文件
    _, err = io.Copy(file, response.Body)
    if err != nil {
        fmt.Println(err)
        return
    }

    fmt.Println("文件下载完成")
}

在上述示例代码中，首先通过os包的Create函数创建了一个用于保存下载内容的文件。然后使用net/http包的Get函数发起HTTP GET请求，指定了要下载的文件的URL。接着将得到的响应体（即要下载的内容）写入创建的文件中，使用了io.Copy函数完成这个过程。最后打印出文件下载完成的信息。

设置HTTP请求头

有时候，在进行HTTP下载时，我们需要自定义一些HTTP请求头，以便与服务端进行正常的通信。下面的示例展示了如何在Golang中设置自定义的HTTP请求头。

package main

import (
    "fmt"
    "io"
    "net/http"
    "os"
)

func main() {
    file, err := os.Create("output.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    // 创建一个HTTP请求
    request, err := http.NewRequest("GET", "http://example.com/file.txt", nil)
    if err != nil {
        fmt.Println(err)
        return
    }

    // 设置自定义的HTTP请求头
    request.Header.Set("User-Agent", "MyDownloader/1.0")
    request.Header.Set("Authorization", "Bearer my_token")

    // 发起HTTP请求
    client := &http.Client{}
    response, err := client.Do(request)
    if err != nil {
        fmt.Println(err)
        return
    }
    defer response.Body.Close()

    _, err = io.Copy(file, response.Body)
    if err != nil {
        fmt.Println(err)
        return
    }

    fmt.Println("文件下载完成")
}

在上述示例代码中，我们使用http.NewRequest函数创建了一个新的HTTP请求，并通过request.Header.Set方法设置了两个自定义的HTTP请求头(User-Agent和Authorization)。然后再通过http.Client的Do方法发起HTTP请求。在得到响应后，将其写入文件中。

断点续传下载

有时候，在下载大文件时，由于网络等原因中断了下载过程，我们希望能够将已经下载的部分保存下来，以便下次继续下载。这就是断点续传。下面是一个示例代码，展示了如何在Golang中实现断点续传下载。

package main

import (
    "fmt"
    "io"
    "net/http"
    "os"
)

func main() {
    file, err := os.OpenFile("output.txt", os.O_APPEND|os.O_WRONLY|os.O_CREATE, 0644)
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    // 获取已下载的文件大小
    fileInfo, err := file.Stat()
    if err != nil {
        fmt.Println(err)
        return
    }
    offset := fileInfo.Size()

    // 创建一个HTTP请求，指定Range头
    request, err := http.NewRequest("GET", "http://example.com/file.txt", nil)
    if err != nil {
        fmt.Println(err)
        return
    }
    request.Header.Set("Range", fmt.Sprintf("bytes=%d-", offset))

    // 发起HTTP请求
    client := &http.Client{}
    response, err := client.Do(request)
    if err != nil {
        fmt.Println(err)
        return
    }
    defer response.Body.Close()

    // 将下载的内容追加写入文件
    _, err = io.Copy(file, response.Body)
    if err != nil {
        fmt.Println(err)
        return
    }

    fmt.Println("文件下载完成")
}

在上述示例代码中，我们通过os.OpenFile函数打开已经存在的文件，并指定了打开文件的模式（os.O_APPEND|os.O_WRONLY|os.O_CREATE，即以追加写入的方式打开）。然后通过file.Stat方法获取已下载的文件大小，以便设置Range头。接着创建HTTP请求，并使用request.Header.Set方法设置Range头，指定从已下载的位置开始继续下载。然后再通过http.Client的Do方法发起HTTP请求。最后将响应的内容追加写入文件中。

通过上述示例，我们简单介绍了如何使用Golang进行HTTP下载，并展示了如何设置HTTP请求头和实现断点续传下载。使用Golang进行HTTP下载，可以轻松地完成各种文件下载任务，并满足个性化需求。