Kubernetes：GCP 上的 Cassandra（有状态集）部署

Question

有没有人尝试使用 kubernetes（不是 GKE）在 GCP 上部署 Cassandra (POC)。如果是这样，您能否分享有关如何使其正常工作的信息？

Answer 1

您可以先查看 IBM's Scalable-Cassandra-deployment-on-Kubernetes。

对于种子发现，您可以使用无头服务，类似于此 Multi-node Cassandra Cluster Made Easy with Kubernetes。

一些困难：

fast local storage for K8s is still in beta; of course, you can use what k8s already has; there are some users reporting 他们使用带有 8 个 C* 节点的 Ceph RBD，每个节点在 K8s 上有 2TB 的数据。
在某个时候你会意识到你需要一个 C* 运算符 - 这是一些很好的启动 - Instaclustr's Cassandra Operator and Pantheon Systems' Cassandra Operator
你需要一种方法scale in gracefully stateful applications（运营商也应该涵盖；如果你不需要运营商，这是一个解决方案，但你仍然需要使用控制器）。

您还可以查看 Cassandra mailing list,，因为那里已经有人在生产中使用 Cassandra 而不是 K8s。

Answer 2

我已经在 kubernetes 上实现了 cassandra。请找到我的部署和服务 yaml 文件：

apiVersion: v1
kind: Service
metadata:
  labels:
    app: cassandra
  name: cassandra
spec:
  clusterIP: None
  ports:
  - port: 9042
  selector:
    app: cassandra
---
apiVersion: apps/v1beta2
kind: StatefulSet
metadata:
  name: cassandra
  labels:
    app: cassandra
spec:
  serviceName: cassandra
  replicas: 3
  updateStrategy:
    type: RollingUpdate
  selector:
    matchLabels:
      app: cassandra
  template:
    metadata:
      labels:
        app: cassandra
    spec:
      terminationGracePeriodSeconds: 1800
      containers:
      - name: cassandra
        image: gcr.io/google-samples/cassandra:v12
        imagePullPolicy: Always
        ports:
        - containerPort: 7000
          name: intra-node
        - containerPort: 7001
          name: tls-intra-node
        - containerPort: 7199
          name: jmx
        - containerPort: 9042
          name: cql
        resources:
          limits:
            cpu: "500m"
            memory: 1Gi
          requests:
           cpu: "500m"
           memory: 1Gi
        securityContext:
          capabilities:
            add:
              - IPC_LOCK
        lifecycle:
          preStop:
            exec:
              command: 
              - /bin/sh
              - -c
              - nodetool drain
        env:
          - name: MAX_HEAP_SIZE
            value: 512M
          - name: HEAP_NEWSIZE
            value: 100M
          - name: CASSANDRA_SEEDS
            value: "cassandra-0.cassandra.default.svc.cluster.local"
          - name: CASSANDRA_CLUSTER_NAME
            value: "K8Demo"
          - name: CASSANDRA_DC
            value: "DC1-K8Demo"
          - name: CASSANDRA_RACK
            value: "Rack1-K8Demo"
          - name: POD_IP
            valueFrom:
              fieldRef:
                fieldPath: status.podIP
        readinessProbe:
          exec:
            command:
            - /bin/bash
            - -c
            - /ready-probe.sh
          initialDelaySeconds: 15
          timeoutSeconds: 5
        volumeMounts:
        - name: cassandra-data
          mountPath: /cassandra_data
  volumeClaimTemplates:
  - metadata:
      name: cassandra-data
    spec:
      accessModes: [ "ReadWriteOnce" ]
      storageClassName: "fast"
      resources:
        requests:
          storage: 5Gi

希望对您有所帮助。

Answer 3

使用头盔：

在 Mac:

brew install helm@2
brew link --force helm@2
helm init

避免 Kubernetes Helm 权限地狱：来自：https://github.com/helm/helm/issues/2224：

kubectl create serviceaccount --namespace kube-system tiller
kubectl create clusterrolebinding tiller-cluster-rule --clusterrole=cluster-admin --serviceaccount=kube-system:tiller

卡桑德拉

孵化器：

helm repo add https://github.com/helm/charts/tree/master/incubator/cassandra

helm install --namespace "cassandra" -n "cassandra" incubator/cassandra
helm status "cassandra"
helm delete  --purge "cassandra"

比特纳米：

helm repo add bitnami https://charts.bitnami.com/bitnami

helm install --namespace "cassandra" -n "my-deployment" bitnami/cassandra
helm status "my-deployment"
helm delete  --purge "my-deployment"

Kubernetes：GCP 上的 Cassandra（有状态集）部署

Kubernetes: Cassandra(stateful set) deployment on GCP

cassandra

kubernetes

kubernetes-statefulset

卡桑德拉

孵化器：

比特纳米：