4

我正在尝试在 centos 上使用 kubernetes 创建 redis 集群。我的 kubernetes 主机在一台主机上运行，​​kubernetes 从机在 2 台不同的主机上运行。

etcdctl 获取 /kube-centos/network/config

{ "Network": "172.30.0.0/16", "SubnetLen": 24, "Backend": { "Type": "vxlan" } }

这是我的复制控制器

apiVersion: v1
kind: ReplicationController
metadata:
  name: redis-master
  labels:
  app: redis
  role: master
  tier: backend
spec:
  replicas: 6
  template:
    metadata:
      labels:
        app: redis
        role: master
        tier: backend
    spec:
      containers:
      - name: master
        image: redis
        command: 
          - "redis-server"
        args:
          - "/redis-master/redis.conf"
        ports:
        - containerPort: 6379
        volumeMounts:
        - mountPath: /redis-master
          name: config
        - mountPath: /redis-master-data 
          name: data
        volumes:
        - name: data
          emptyDir: {}
        - name: config
          configMap:
            name: redis-config
            items:
            - key: redis-config
              path: redis.conf

kubectl 创建 -f rc.yaml

NAME                           READY     STATUS    RESTARTS   AGE       IP            NODE
redis-master-149tt             1/1       Running   0          8s        172.30.96.4   centos-minion-1
redis-master-14j0k             1/1       Running   0          8s        172.30.79.3   centos-minion-2
redis-master-3wgdt             1/1       Running   0          8s        172.30.96.3   centos-minion-1
redis-master-84jtv             1/1       Running   0          8s        172.30.96.2   centos-minion-1
redis-master-fw3rs             1/1       Running   0          8s        172.30.79.4   centos-minion-2
redis-master-llg9n             1/1       Running   0          8s        172.30.79.2   centos-minion-2

使用的 Redis-config 文件

appendonly yes
cluster-enabled yes
cluster-config-file /redis-master/nodes.conf
cluster-node-timeout 5000
dir /redis-master
port 6379

我使用以下命令创建了 kubernetes 服务。

kubectl expose rc redis-master --name=redis-service --port=6379 --target-port=6379 --type=NodePort

Name:           redis-service
Namespace:      default
Labels:         app=redis
                role=master
                tier=backend
Selector:       app=redis,role=master,tier=backend
Type:           NodePort
IP:             10.254.229.114
Port:           <unset> 6379/TCP
NodePort:       <unset> 30894/TCP
Endpoints:      172.30.79.2:6379,172.30.79.3:6379,172.30.79.4:6379 + 3     more...
Session Affinity:   None
No events.

现在我已经启动并运行了所有的 pod 和服务。我正在使用 redis-trib pod 创建 redis 集群。

kubectl exec -it redis-trib bash

./redis-trib.rb 创建 --replicas 1 172.30.79.2:6379 172.30.79.3:6379 172.30.79.4:6379 172.30.96.2:6379 172.30.96.3:6379 172.30.96.4:6379

使用以下消息按预期创建 Redis 集群。

[OK] All 16384 slots covered.

现在我应该能够从我网络中的任何主机访问我在 kubernetes 节点 IP(192.168.240.116) 和 nodePort(30894) 上的 redis 集群。当我从一个 kubernetes 节点执行以下命令时，一切都按预期工作。

redis-cli -p 30894 -h 192.168.240.116 -c

192.168.240.116:30894> set foo bar
-> Redirected to slot [12182] located at 172.30.79.4:6379
OK
172.30.79.4:6379>

当我从同一网络中的不同（非 kubernetes）节点运行相同的命令时，我看到连接超时错误。

redis-cli -c -p 30894 -h 192.168.240.116

192.168.240.116:30894> set foo bar
-> Redirected to slot [12182] located at 172.30.79.4:6379
Could not connect to Redis at 172.30.79.4:6379: Connection timed out

使用NodePort服务类型暴露时是不是不能访问kubernetes集群网络外的redis-cluster ？

我也不能使用LoadBalancer服务类型，因为我没有将它托管在云上。

我已经被这个问题困扰了很长一段时间。有人可以建议我应该使用什么方法来访问我的网络之外的 redis-cluster 吗？

谢谢

4

1 回答 1

3

使用此设置运行./redis-trib.rb create --replicas 1 172.30.79.2:6379 172.30.79.3:6379 172.30.79.4:6379 172.30.96.2:6379 172.30.96.3:6379 172.30.96.4:6379没有意义。

该端口6379只能通过您提出的服务访问，但永远不能在您尝试时直接访问。这就是您在尝试使用设置时遇到问题的原因。

您可以做的是使用自己的服务公开每个 POD，并拥有一个额外的集群服务来负载平衡外部请求。如Kelsey Hightower的示例存储库所示。这样，POD 可以通过内部公开的端口进行通信，并且（外部）客户端可以使用负载平衡的集群端口。这意味着每个 POD 都需要它自己的 ReplicaSet（或 Deployment）。Kelsey 在 YouTube 上进行了长篇演讲，解释了设置 - YouTube / Slideshare。

另一种方法是使用单个 redis master，如其他示例所示。

于 2017-03-20T16:06:16.183 回答