0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何限制容器可以使用的CPU资源

马哥Linux运维 来源:博客园sparkdev 2024-10-24 17:04 次阅读

默认情况下容器可以使用的主机 CPU 资源是不受限制的。和内存资源的使用一样,如果不对容器可以使用的 CPU 资源进行限制,一旦发生容器内程序异常使用 CPU 的情况,很可能把整个主机的 CPU 资源耗尽,从而导致更大的灾难。本文将介绍如何限制容器可以使用的 CPU 资源。
本文的 demo 中会继续使用《Docker: 限制容器可用的内存》一文中创建的 docker 镜像 u-stress 进行压力测试,文中就不再过多的解释了。

限制可用的 CPU 个数

在 docker 1.13 及更高的版本上,能够很容易的限制容器可以使用的主机 CPU 个数。只需要通过 --cpus 选项指定容器可以使用的 CPU 个数就可以了,并且还可以指定如 1.5 之类的小数。接下来我们在一台有四个 CPU 且负载很低的主机上进行 demo 演示:

61fef396-90f7-11ef-a511-92fbcf53809c.png

通过下面的命令创建容器,--cpus=2 表示容器最多可以使用主机上两个 CPU:

$ docker run -it --rm --cpus=2 u-stress:latest /bin/bash

然后由 stress 命令创建四个繁忙的进程消耗 CPU 资源:

# stress -c 4

我们先来看看 docker stats 命令的输出:

621bfb30-90f7-11ef-a511-92fbcf53809c.png

容器 CPU 的负载为 200%,它的含义为单个 CPU 负载的两倍。我们也可以把它理解为有两颗 CPU 在 100% 的为它工作。
再让我们通过 top 命令看看主机 CPU 的真实负载情况:

6238e4a2-90f7-11ef-a511-92fbcf53809c.png

哈哈,有点大跌眼镜!实际的情况并不是两个 CPU 负载 100%,而另外两个负载 0%。四个 CPU 的负载都是 50%,加起来容器消耗的 CPU 总量就是两个 CPU 100% 的负载。

看来对于进程来说是没有 CPU 个数这一概念的,内核只能通过进程消耗的 CPU 时间片来统计出进程占用 CPU 的百分比。这也是我们看到的各种工具中都使用百分比来说明 CPU 使用率的原因。
严谨起见,我们看看 docker 的官方文档中是如何解释 --cpus 选项的:
Specify how much of the available CPU resources a container can use.
果然,人家用的是 "how much",不可数的!并且 --cpus 选项支持设为小数也从侧面说明了对 CPU 的计量只能是百分比。
看来笔者在本文中写的 "CPU 个数" 都是不准确的。既然不准确,为什么还要用?当然是为了容易理解。况且笔者认为在 --cpus 选项的上下文中理解为 "CPU 个数" 并没有问题(有兴趣的同学可以读读--cpus 选项的由来,人家的初衷也是要表示 CPU 个数的)。

虽然 --cpus 选项用起来很爽,但它毕竟是 1.13 才开始支持的。对于更早的版本完成同样的功能我们需要配合使用两个选项:--cpu-period 和 --cpu-quota(1.13 及之后的版本仍然支持这两个选项)。下面的命令实现相同的结果:

$ docker run -it --rm --cpu-period=100000 --cpu-quota=200000 u-stress:latest /bin/bash

这样的配置选项是不是让人很傻眼呀!100000 是什么?200000 又是什么?它们的单位是微秒,100000 表示 100 毫秒,200000 表示 200 毫秒。它们在这里的含义是:在每 100 毫秒的时间里,运行进程使用的 CPU 时间最多为 200 毫秒(需要两个 CPU 各执行 100 毫秒)。要想彻底搞明白这两个选项的同学可以参考:CFS BandWith Control。我们要知道这两个选项才是事实的真相,但是真相往往很残忍!还好 --cpus 选项成功的解救了我们,其实它就是包装了 --cpu-period 和 --cpu-quota。

指定固定的 CPU

通过 --cpus 选项我们无法让容器始终在一个或某几个 CPU 上运行,但是通过 --cpuset-cpus 选项却可以做到!这是非常有意义的,因为现在的多核系统中每个核心都有自己的缓存,如果频繁的调度进程在不同的核心上执行势必会带来缓存失效等开销。下面我们就演示如何设置容器使用固定的 CPU,下面的命令为容器设置了 --cpuset-cpus 选项,指定运行容器的 CPU 编号为 1:

$ docker run -it --rm --cpuset-cpus="1" u-stress:latest /bin/bash

再启动压力测试命令:

# stress -c 4

然后查看主机 CPU 的负载情况:

6255441c-90f7-11ef-a511-92fbcf53809c.png

这次只有 Cpu1 达到了 100%,其它的 CPU 并未被容器使用。我们还可以反复的执行 stress -c 4 命令,但是始终都是 Cpu1 在干活。
再看看容器的 CPU 负载,也是只有 100%:

626f2d3c-90f7-11ef-a511-92fbcf53809c.png

--cpuset-cpus 选项还可以一次指定多个 CPU:

$ docker run -it --rm --cpuset-cpus="1,3" u-stress:latest /bin/bash

这次我们指定了 1,3 两个 CPU,运行 stress -c 4 命令,然后检查主机的 CPU 负载:

628290de-90f7-11ef-a511-92fbcf53809c.png

Cpu1 和 Cpu3 的负载都达到了 100%。
容器的 CPU 负载也达到了 200%:

629e6cb4-90f7-11ef-a511-92fbcf53809c.png

--cpuset-cpus 选项的一个缺点是必须指定 CPU 在操作系统中的编号,这对于动态调度的环境(无法预测容器会在哪些主机上运行,只能通过程序动态的检测系统中的 CPU 编号,并生成 docker run 命令)会带来一些不便。

设置使用 CPU 的权重

当 CPU 资源充足时,设置 CPU 的权重是没有意义的。只有在容器争用 CPU 资源的情况下, CPU 的权重才能让不同的容器分到不同的 CPU 用量。--cpu-shares 选项用来设置 CPU 权重,它的默认值为 1024。我们可以把它设置为 2 表示很低的权重,但是设置为 0 表示使用默认值 1024。
下面我们分别运行两个容器,指定它们都使用 Cpu0,并分别设置 --cpu-shares 为 512 和 1024:

$ docker run -it --rm --cpuset-cpus="0" --cpu-shares=512 u-stress:latest /bin/bash
$ docker run -it --rm --cpuset-cpus="0" --cpu-shares=1024 u-stress:latest /bin/bash

在两个容器中都运行 stress -c 4 命令。

此时主机 Cpu0 的负载为 100%:

62b968fc-90f7-11ef-a511-92fbcf53809c.png

容器中 CPU 的负载为:

62d2ef5c-90f7-11ef-a511-92fbcf53809c.png

两个容器分享一个 CPU,所以总量应该是 100%。具体每个容器分得的负载则取决于 --cpu-shares 选项的设置!我们的设置分别是 512 和 1024,则它们分得的比例为 1:2。在本例中如果想让两个容器各占 50%,只要把--cpu-shares 选项设为相同的值就可以了。

总结

相比限制容器用的内存,限制 CPU 的选项要简洁很多。但是简洁绝对不是简单,大多数把复杂东西整简单的过程都会丢失细节或是模糊一些概念,比如从 --cpu-period 和 --cpu-quota 选项到 --cpus 选项的进化。对于使用者来说这当然是好事,可以减缓我们的学习曲线,快速入手。

链接:https://www.cnblogs.com/sparkdev/p/8052522.html

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • cpu
    cpu
    +关注

    关注

    68

    文章

    10868

    浏览量

    211839
  • 内存
    +关注

    关注

    8

    文章

    3026

    浏览量

    74065
  • 程序
    +关注

    关注

    117

    文章

    3787

    浏览量

    81066
  • 容器
    +关注

    关注

    0

    文章

    495

    浏览量

    22063
  • Docker
    +关注

    关注

    0

    文章

    461

    浏览量

    11860

原文标题:Docker: 限制容器可用的 CPU

文章出处:【微信号:magedu-Linux,微信公众号:马哥Linux运维】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    Kubernetes之路 1 - Java应用资源限制的迷思

    奇妙地被OOM Killer干掉。这背后一个非常常见的原因是:没有正确设置容器资源限制以及对应的JVM的堆空间大小。我们拿一个tomcat应用为例,其实例代码和Kubernetes部署文件
    发表于 03-29 13:06

    Kubernetes之路 2 - 利用LXCFS提升容器资源可见性

    通过 lxcfs 提供容器资源可见性的方法,可以帮助一些遗留系统更好的识别容器运行时的资源限制
    发表于 04-17 14:05

    阿里云容器Kubernetes监控(一) - 资源监控

    %的工作处理的是容器前和容器后的问题,容器前指的是如何本地开发、集成、测试并部署到容器环境;而容器后指的是如何对部署到
    发表于 04-23 14:35

    阿里云容器Kubernetes监控(一) - 资源监控

    %的工作处理的是容器前和容器后的问题,容器前指的是如何本地开发、集成、测试并部署到容器环境;而容器后指的是如何对部署到
    发表于 04-23 14:35

    阿里云容器Kubernetes监控(一) - 资源监控

    %的工作处理的是容器前和容器后的问题,容器前指的是如何本地开发、集成、测试并部署到容器环境;而容器后指的是如何对部署到
    发表于 04-23 14:35

    是否可以使用内部FPGA的资源连接到总线

    你好!我正在设计一个MIL-STD控制器。该标准意味着使用直接或变压器耦合连接到总线。我是否可以使用内部FPGA的资源来完成此连接方法,ori是否必须使用其他外部设备?先谢谢你!以上来自于谷歌翻译
    发表于 09-30 11:19

    超大规模商用 K8s 场景下,阿里巴巴如何动态解决容器资源的按需分配问题?

    肯定有些地方出问题了。于是我们就要剖析,问题究竟出在哪里。针对于内存的 OOM,CPU 资源被 throttle,我们可以推断我们给与容器分配的初始
    发表于 10-15 14:47

    请问使用USB功能时VBUS可以使用多少电容器

    当使用USB功能时,VBUS可以使用多少电容器
    发表于 12-09 07:23

    在STM32G474的SBSFU示例中可以使用SPI还是有任何限制

    您好,我想问一下,在用户应用程序中 STM32G474 的 SBSFU 示例中,固件更新是使用 ymodem 协议完成的,即 UART 我们可以使用 SPI 协议而不是这个吗?这可以使用 SPI 还是有任何限制?????请建议
    发表于 12-08 08:36

    多少电容器通风装置可以使用USB功能?

    uF。 用户需要设计自己的电路并调整 VBUS 电容器。用USB-IF 提供的 USB 分析工具 USBET20 , 用户可以查看VBUS 电容器是否符合 USB-IF 规格 。
    发表于 08-28 08:08

    CPU提供了哪些资源,如何评估CPU资源的消耗

    上面的图和文字摘自ETSI GS NFV-TST 008,呈现的是一个物理CPU注1能够被测量的几个资源维度和他们之间的对应关系。
    的头像 发表于 01-22 09:09 1w次阅读
    <b class='flag-5'>CPU</b>提供了哪些<b class='flag-5'>资源</b>,如何评估<b class='flag-5'>CPU</b><b class='flag-5'>资源</b>的消耗

    IoT 可以使用 WPT

    IoT 可以使用 WPT
    发表于 03-19 12:08 0次下载
    IoT <b class='flag-5'>可以使</b>用 WPT

    逆变器使用28377S时CLA与CPU资源分配

    CLA使用后会大大提高计算能力,特别在在倍频采样中。逆变器设计时,CLA中主要处理采样数据和SVPWM计算,CPU主要处理环路控制。可以使用软件触发CLA方式,使CPU中断和CLA中断同步,同时
    发表于 11-08 14:06 8次下载
    逆变器使用28377S时CLA与<b class='flag-5'>CPU</b><b class='flag-5'>资源</b>分配

    Linux内核是如何限制进程对CPU资源使用的?

    在使用 Kubernetes(简称K8s) 时,通常会在同一台机器上部署多个 Pod。如果某个 Pod 中的服务出现问题(如出现死循环),将会导致占用大量的 CPU 时间,从而影响到其他 Pod 的正常运行。
    发表于 05-08 18:14 1261次阅读
    Linux内核是如何<b class='flag-5'>限制</b>进程对<b class='flag-5'>CPU</b><b class='flag-5'>资源</b>使用的?

    Linux是如何对容器下的进程进行CPU限制的,底层是如何工作的?

    现在很多公司的服务都是跑在容器下,我来问几个容器 CPU 相关的问题,看大家对天天在用的技术是否熟悉。
    的头像 发表于 11-29 14:31 1435次阅读
    Linux是如何对<b class='flag-5'>容器</b>下的进程进行<b class='flag-5'>CPU</b><b class='flag-5'>限制</b>的,底层是如何工作的?