首页
学习
活动
专区
工具
TVP
发布
社区首页 >问答首页 >在Go中分配了大量内存。如何修复?

在Go中分配了大量内存。如何修复?
EN

Stack Overflow用户
提问于 2019-06-10 10:40:35
回答 2查看 839关注 0票数 0

为50个5MB的请求分配了数百MB的内存。内存被分配,不再被释放。我如何清除我的记忆?为什么会发生这种情况呢?

我已经在我的家用电脑和VPS上尝试过Ubuntu

代码语言:javascript
复制
package main

import (
    "fmt"
    "io/ioutil"
    "net/http"
    "time"
)

func main() {
    fmt.Println("start")

    for i := 0; i < 50; i++ {
        go func() {
            DoRequest()
        }()
        time.Sleep(10 * time.Millisecond)
    }

    time.Sleep(10 * time.Minute)
}

func DoRequest() error {
    requestUrl := "https://blockchain.info/rawblock/0000000000000000000eebedea046425bd54626e6c56eb032e66e714d0141ea6"

    req, err := http.NewRequest("GET", requestUrl, nil)

    if err != nil {
        return err
    }

    req.Header.Set("user-agent", "free")

    httpClient := &http.Client{
        Timeout: time.Second * 10,
    }

    resp, err := httpClient.Do(req)

    if resp != nil {
        defer resp.Body.Close()
    }

    if err != nil {
        return err
    }

    body, err := ioutil.ReadAll(resp.Body)
    if err != nil {
        return err
    }

    fmt.Println("bodylen", len(body))

    return nil
}

分配到某处400MB

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2019-06-10 14:39:06

代码语言:javascript
复制
 for i := 0; i < 50; i++ {
        go func() {
            DoRequest()
        }()
        time.Sleep(10 * time.Millisecond)
    }

永远不要创建这样的go例程。在任何情况下(包括最坏的情况),始终确保你创建的go例程不会填满大量(所有)内存

简单的解决方案是控制go-例程的数量,可以同时产生(或运行)go例程。

你可以通过乘以你想要一次运行的go-例程的最大数量来预先计算在最坏的情况下占用的内存,并且一个go-例程可以使用最大内存。

您可以使用通道来控制go-routines的实例。

Refer此堆栈溢出问题的第一个答案

始终在绩效和所需资源之间使用平衡的解决方案。

2019年6月11日更新

下面是go程序https://play.golang.org/p/HovNRgp6FxH示例

票数 0
EN

Stack Overflow用户

发布于 2019-06-10 11:57:09

您将为每个go例程创建一个http客户端。

Http客户端被设计为只创建一次,并多次使用。它们是常规安全的。它们允许连接重用和其他效率节省。

在main中创建一次http客户端(而不是在go-例程中)&然后将这个引用传递给所有50个go-例程。

编辑:此外,虽然在您的情况下可能不会产生实际差异,但请求的顺序通常如下所示:

代码语言:javascript
复制
resp, err := httpClient.Do(req)
if err != nil {
        return err // check error first
}
defer resp.Body.Close() // no error - so resp will *NOT* be nil - so this is safe

编辑2:正如@Adrian提到的:go的垃圾收集不是即时的--也不应该是--因为它是一个昂贵的操作。如果你不再需要一个内存块-简单地不再引用它。让GC做它的工作,这样你就可以专注于你的工作了!

如果你对go的GC的演变很好奇:

票数 8
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/56519907

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档