Go在容器运行时要注意的细节

陈晓猛

2020-07-10

在云原生时代,Go语言由于在部署时只需要一个二进制文件就能够运行起来而备受青睐。但有一个细节问题,如果不妥善处理,则很可能导致Go程序出现明显的性能下降和延迟。

1 问题描述

在Go语言中,Go scheduler的P数量非常重要,因为它会极大地影响Go在运行时的表现。在目前的Go语言中,P的数量默认是系统的CPU核数。在容器化的环境中,Go程序所获取的CPU核数是错误的,它所获取的是宿主机的CPU核数。即使容器和宿主机的CPU核数是共享的,但在集群中我们会针对每个Pod分配指定的核数,因此实际上我们需要的是Pod的核数,而不是宿主机的CPU核数。

2 会造成什么后果

前文曾提到Go的M: N调度模型,其要求M必须与P进行绑定,然后才能不断地在M上循环寻找可运行的G来执行相应的任务。注意,M必须与P进行绑定,其绑定的这个P,要求必须是空闲状态。但在容器化的部署环境中,P的数量由于被“错误”设置,因此拥有大量空闲的P。可以这样理解,只要有足够多的M,那么P就可以都被绑定。这时又产生了另外一个问题,M的数量是否会不断增加呢?答案是会的。在程序运行过程中,由于产生了网络I/O阻塞,导致M会随着程序的不断执行而不断增加,,即能够达到前面假设的情况。最终导致Go程序的延迟加大,程序响应缓慢。

3 解决方法

产生这个问题的本质原因是Go程序没有正确地获得我们所期望的CPU核数(应当获取具体分配给Pod的配额),因此解决方案有两种:

  • 结合部署情况,主动设置正确的GOMAXPROCS核数。

  • 通过cgroup信息,读取容器内的正确GOMAXPROCS核数。

目前,Go尚没有非常完美的办法来解决这个问题,因此这里推荐使用Uber公司推出的uber-go/automaxprocs开源库,它会在Go程序运行时根据cgroup的挂载信息来修改 GOMAXPROCS核数,并基于一定规则选择一个最合适的数值。使用方式如下:

import _ "go.uber.org/automaxprocs"

我们只需在Go程序启动时进行引用即可,如果有特殊的需求,那么主动设置GOMAXPROCS也是可以的。本文授权转载于:《Go语言编程之旅:一起用Go做项目》

关于本书

《Go语言编程之旅:一起用Go做项目》

陈剑煜 徐新华 著

  • 包含5个大的Go项目实践及重点源码分析

  • 针对Go语言的分析工具及常见问题进行了全面讲解

本书对项目开发、细节分析、运行时分析等核心内容进行了较为深入的剖析,提供了相对完整的项目实践经验。在项目迭代过程中,难免会遇到问题,因此本书针对Go语言的大杀器(分析工具)及常见问题进行了全面讲解,帮助读者对各类问题进行排查。

(扫码了解本书详情)

读者评论

  • 请问源代码在哪能获得??????**

    zfm305发表于 2020/7/25 12:44:52

相关博文

  • 社区使用反馈专区

    陈晓猛 2016-10-04

    尊敬的博文视点用户您好: 欢迎您访问本站,您在本站点访问过程中遇到任何问题,均可以在本页留言,我们会根据您的意见和建议,对网站进行不断的优化和改进,给您带来更好的访问体验! 同时,您被采纳的意见和建议,管理员也会赠送您相应的积分...

    陈晓猛 2016-10-04
    4052 651 3 6
  • 迎战“双12”!《Unity3D实战核心技术详解》独家预售开启!

    陈晓猛 2016-12-05

    时隔一周,让大家时刻挂念的《Unity3D实战核心技术详解》终于开放预售啦! 这本书不仅满足了很多年轻人的学习欲望,并且与实际开发相结合,能够解决工作中真实遇到的问题。预售期间优惠多多,实在不容错过! Unity 3D实战核心技术详解 ...

    陈晓猛 2016-12-05
    2542 35 0 1
  • czk 2017-07-29
    3707 26 0 1