☰

cpu.cfs_quota_us가 LXC 컨테이너의 CPU 대역폭을 제한하지 않는 이유는 무엇입니까?

tag-icon • tag-icon linux lxc cgroups
cpu.cfs_quota_us가 LXC 컨테이너의 CPU 대역폭을 제한하지 않는 이유는 무엇입니까?

컨테이너를 시스템 총 CPU 대역폭의 25%로 제한하고 싶습니다.
내 설정은 다음과 같습니다.

  • LXC 버전 1.0.2
  • 커널 3.2.45
  • 한 명의 사용자가 LXC 컨테이너에 대해 cgroup(foo)을 생성했습니다.
  • 호스트에서 사용 가능한 코어 40개
  • 호스트와 컨테이너는 다음을 제외하고 다른 모든 cgroup 서브시스템에 대해 기본값을 갖습니다.
  • /sys/fs/cgroup/cpu/lxc/foo/cpu.cfs_quota_us = 400000
  • /sys/fs/cgroup/cpu/lxc/foo/cpu.cfs_period_us = 100000
  • /sys/fs/cgroup/cpuset/lxc/foo/cpuset.cpus = 0-15

다음 공식을 사용하여 할당량을 계산했습니다.

(# of cpus available to container) * (cpu.cfs_period_us) * (.25) so 16 * 100000 * .25 = 400000

컨테이너 내부와 외부에서 동시에 기본 스트레스를 실행하여 초당 몇 개의 작업이 내부와 외부에서 허용되는지 측정했고 결과는 기본적으로 할당량 "-1"로 실행한 것과 동일했습니다. 즉, 할당량이 없다는 뜻입니다.

외부 실행:

$ ./stress-ng  --cpu-load 50 -c 40 --timeout 20s --metrics-brief
stress-ng: info: [25649] dispatching hogs: 40 cpu  
stress-ng: info: [25649] successful run completed in 20.44s  
stress-ng: info: [25649] stressor      bogo ops real time  usr time  sys time   bogo ops/s   bogo ops/s  
stress-ng: info: [25649]                          (secs)    (secs)    (secs)   (real time) (usr+sys time)  
stress-ng: info: [25649] cpu              37348     20.18    380.56      0.58      1850.85        97.99

내부 실행:

$ ./stress-ng --cpu-load 100 -c 16 --timeout 20s --metrics-brief  
stress-ng: info: [34256] dispatching hogs: 16 cpu  
stress-ng: info: [34256] successful run completed in 20.10s  
stress-ng: info: [34256] stressor      bogo ops real time  usr time  sys time   bogo ops/s   bogo ops/s  
stress-ng: info: [34256]                          (secs)    (secs)    (secs)   (real time) (usr+sys time)  
stress-ng: info: [34256] cpu              24147     20.03    205.20      0.17      1205.67       117.58

ops/s를 기준으로 39%를 얻었습니다. 왜 이런 일이 발생합니까? 으로 제한하면 안되나요 cpu.cfs_quota_us?

미리 도움을 주셔서 감사합니다.

답변1

다른 사람이 비슷한 혼란스러운 결과를 볼 경우를 대비해 이 질문에 대한 답변을 게시하고 싶었습니다. 두 가지 문제가 있었던 것 같습니다.

  • CPU 대역폭을 추정하려면 cgroups cpuset에서 사용 가능한 # CPU가 아닌 호스트의 # CPU를 사용해야 합니다.

    (# of cpus on the host) * (cpu.cfs_period_us) * (.25) so 40 * 100000 * .25 = 1000000

  • 컨테이너 내부의 스트레스-ng 실행은 /lxc/foo cgroup의 CPU 및 cpuset 컨트롤러를 사용하는 반면, 컨테이너 외부의 스트레스-ng 실행은 /system/sshd.service cgroup을 사용했습니다.

실제 응용 프로그램을 더 잘 모델링하려면 다음을 사용하여 사용할 컨트롤러를 지정해야 했습니다.cgexec:

$ cgexec -g cpuset:/lxc/foo -g cpu:/lxc/foo ./stress-ng --cpu-load 100 -c 48 --times --timeout 10s --metrics-brief  
stress-ng: info: [6252] dispatching hogs: 48 cpu  
stress-ng: info: [6252] successful run completed in 10.36s  
stress-ng: info: [6252] stressor      bogo ops real time  usr time  sys time   bogo ops/s   bogo ops/s  
stress-ng: info: [6252]                          (secs)    (secs)    (secs)   (real time) (usr+sys time)  
stress-ng: info: [6252] cpu              11152     10.09    102.83      0.12      1105.60       108.32  
stress-ng: info: [6252] for a 10.36s run time:  
stress-ng: info: [6252]     414.46s available CPU time  
stress-ng: info: [6252]     102.85s user time   ( 24.82%)  
stress-ng: info: [6252]       0.12s system time (  0.03%)  
stress-ng: info: [6252]     102.97s total time  ( 24.84%)

관련 정보