记录一次K8S的容器压测监控

记录一次K8S的容器压测

基本情况

服务名称	POD数量	POD规格	压测并发数	压测时间
用户中心登录服务	1个POD	1C2G	30个用户登录	2h

GC情况

YGC次数	YGC/毫秒	FGC次数	FGCT/毫秒	GCT/毫秒
6849	209.355	12	3.190	212.545

---

总结：FGC次数在2小时中只进行了12次，耗时3.190毫秒；YGC总共6849次，耗时209.355毫秒；

监控POD内存使用情况

PromQL：

topk(5,round(sum by(name, id, job, node) (container_memory_working_set_bytes{
    
    image!="",name=~".*54p5h.*"}) / sum by(name, id, job, node) (container_spec_memory_limit_bytes{
    
    image!="",name=~".*54p5h.*"}) * 100 != +Inf) )

查询地址：http://10.152.17.11/graph

---

总结：压测的过程中内存一直持续上升，最后稳定在90%左右的利用率上；

---

监控POD的CPU使用情况

PromQL：

topk(15,sum by(name, namespace, job) (rate(container_cpu_usage_seconds_total{
    
    image!="",name=~".*54p5h.*"}[10m])) / (sum by(name, namespace, job) (container_spec_cpu_quota{
    
    image!="",name=~".*54p5h.*"} / 100000)))

---

总结：容器在30个并发的压测下CUP达到瓶颈已经使用100%;此时监控容器生命周期中度过的受限的cpu周期总数已达到37510次，此压测下CPU达到瓶颈；

---

sum(container_cpu_cfs_throttled_periods_total{
    
    image!="",name=~".*54p5h.*",container_label_license=""}) by (name)

• container生命周期中度过的受限的cpu周期总数

PromQL：
查询地址：http://10.152.17.11/graph