小编典典

使用许多goroutine消耗内存

go

我试图检查Go如何处理100,000个goroutine。我写了一个简单的程序来产生许多例程,除了打印一些公告外什么也不做。我将MaxStack大小限制为只有512个字节。但是我注意到程序的大小并没有因此而减少。它消耗了大约460
MB的内存,因此每个goroutine消耗了大约4 KB的内存。我的问题是,我们可以将goroutine的最大堆栈大小设置为低于“最小”堆栈大小(可能为4
KB)吗?我们如何设置Goroutine的最小堆栈大小?以下是我用于测试的示例代码:

package main

import "fmt"
import "time"

import "runtime/debug"

func main() {
    fmt.Printf("%v\n", debug.SetMaxStack(512))
    var i int
    for i = 0; i < 100000; i++ {
        go func(x int) {
            for {
                time.Sleep(10 * time.Millisecond)
                //fmt.Printf("I am %v\n", x)
            }
        }(i)
    }
    fmt.Println("Done")
    time.Sleep(999999999999)
}

阅读 486

收藏
2020-07-02

共1个答案

小编典典

runtime /
debug.SetMaxStack函数仅确定对程序进行无限递归将终止的点。http://golang.org/pkg/runtime/debug/#SetMaxStack

荒谬地将其设置为最小堆栈没有任何意义,并且仅当任何堆栈的使用中大小超出限制时才由于程序崩溃而限制最大大小。

从技术上讲,崩溃仅在必须增长堆栈的情况下才会发生,因此当堆栈需要8KB以上(或在转到1.2之前为4KB)时,程序将死亡。

您的程序使用最少4KB * nGoroutine的原因是因为堆栈是页面对齐的,所以VM页面上不能有多个堆栈。因此,您的程序将至少使用nGoroutines个页面,并且OS通常仅以页面大小的增量来测量和分配内存。

更改堆栈的起始(最小)大小的唯一方法是修改并重新编译go运行时(也可能是编译器)。

Go 1.3将包括连续的堆栈,通常比Go 1.2和更早版本中的拆分堆栈快,并且将来可能还会导致较小的初始堆栈。

2020-07-02