在Go中分配了大量的内存。怎么修？

Question

为 50 个 5 MB 请求分配了数百 MB 内存。内存已分配且不再释放。我怎样才能清除我的记忆？为什么会发生这种情况？

我在我的家用电脑和 VPS 上尝试过 Ubuntu

package main

import (

    "fmt"

    "io/ioutil"

    "net/http"

    "time"

)

func main() {

    fmt.Println("start")

    for i := 0; i < 50; i++ {

        go func() {

            DoRequest()

        }()

        time.Sleep(10 * time.Millisecond)

    }

    time.Sleep(10 * time.Minute)

}

func DoRequest() error {

    requestUrl := "https://blockchain.info/rawblock/0000000000000000000eebedea046425bd54626e6c56eb032e66e714d0141ea6"

    req, err := http.NewRequest("GET", requestUrl, nil)

    if err != nil {

        return err

    }

    req.Header.Set("user-agent", "free")

    httpClient := &http.Client{

        Timeout: time.Second * 10,

    }

    resp, err := httpClient.Do(req)

    if resp != nil {

        defer resp.Body.Close()

    }

    if err != nil {

        return err

    }

    body, err := ioutil.ReadAll(resp.Body)

    if err != nil {

        return err

    }

    fmt.Println("bodylen", len(body))

    return nil

}

某处分配400MB

Answer 1

您正在为每个 go 例程创建一个 http 客户端。Http 客户端被设计为一次创建并多次使用。它们是日常安全的。它们允许连接重用和其他效率节省。在 main 中（而不是在您的 go 例程中）创建一次 http 客户端，然后将此单个引用传递给您的所有 50 个 go 例程。编辑：此外，虽然它可能不会对您的情况产生实际影响，但请求的顺序通常如下所示：resp, err := httpClient.Do(req)if err != nil {        return err // check error first}defer resp.Body.Close() // no error - so resp will *NOT* be nil - so this is safe编辑2：正如@Adrian所提到的：go的垃圾收集不是即时的 - 也不应该是 - 因为它是一项昂贵的操作。如果您不再需要某个内存块 - 只需不再引用它即可。让 GC 完成它的工作，这样您就可以专注于您的工作！

Answer 2

 for i := 0; i < 50; i++ {        go func() {            DoRequest()        }()        time.Sleep(10 * time.Millisecond)    }切勿创建这样的 go 例程。始终确保您创建 go 例程的方式在任何情况下（包括最坏的情况）都不会填充大量（所有）内存简单的解决方案是控制一次可以生成（或运行）的 go 例程的数量。您可以通过乘以一次要运行的 go 例程的 max-number 来预先计算最坏情况下要占用的内存，并且 max-memory 可以被一个 go 例程使用。