使用 Kubernetes 进行分布式负载测试

查看本文大纲

前言

该教程描述如何在Kubernetes中进行分布式负载均衡测试，包括一个 web 应用、docker 镜像和 Kubernetes controllers/services。更多资料请查看Distributed Load Testing Using Kubernetes 。

注意：该测试是在我自己本地搭建的 kubernetes 集群上测试的，不需要使用 Google Cloud Platform。

不需要 GCE 及其他组件，你只需要有一个 kubernetes 集群即可。

sample-webapp 目录下包含一个简单的 web 测试应用。我们将其构建为 docker 镜像，在 kubernetes 中运行。你可以自己构建，也可以直接用这个我构建好的镜像index.tenxcloud.com/jimmy/k8s-sample-webapp:latest。

在 kubernetes 上部署 sample-webapp。

$ cd kubernetes-config
$ kubectl create -f sample-webapp-controller.yaml
$ kubectl create -f kubectl create -f sample-webapp-service.yaml

locust-master和locust-work使用同样的 docker 镜像，修改 cotnroller 中spec.template.spec.containers.env字段中的 value 为你sample-webapp service 的名字。

- name: TARGET_HOST
  value: http://sample-webapp:8000

locust-master和locust-work controller 使用的都是locust-tasks docker 镜像。你可以直接下载，也可以自己编译。自己编译大概要花几分钟时间，镜像大小为 820M。

$ docker build -t index.tenxcloud.com/jimmy/locust-tasks:latest .
$ docker push index.tenxcloud.com/jimmy/locust-tasks:latest

注意：我使用的是时速云的镜像仓库。

每个 controller 的 yaml 的spec.template.spec.containers.image 字段指定的是我的镜像：

image: index.tenxcloud.com/jimmy/locust-tasks:latest

$ kubectl create -f locust-master-controller.yaml
$ kubectl create -f locust-master-service.yaml

Now deploy locust-worker-controller:

$ kubectl create -f locust-worker-controller.yaml

你可以很轻易的给 work 扩容，通过命令行方式：

$ kubectl scale --replicas=20 replicationcontrollers locust-worker

当然你也可以通过 WebUI：Dashboard - Workloads - Replication Controllers - ServiceName - Scale 来扩容。

参考kubernetes 的 traefik ingress 安装，在ingress.yaml中加入如下配置：

  - host: traefik.locust.io
    http:
      paths:
      - path: /
        backend:
          serviceName: locust-master
          servicePort: 8089

然后执行kubectl replace -f ingress.yaml即可更新 traefik。

通过 Traefik 的 dashboard 就可以看到刚增加的traefik.locust.io节点。

打开http://traefik.locust.io页面，点击Edit输入伪造的用户数和用户每秒发送的请求个数，点击Start Swarming就可以开始测试了。

在测试过程中调整sample-webapp的 pod 个数（默认设置了 1 个 pod），观察 pod 的负载变化情况。

从一段时间的观察中可以看到负载被平均分配给了 3 个 pod。

在 locust 的页面中可以实时观察也可以下载测试结果。