什么是SQL自動化？你知道嗎？

作者：喬克 2023-03-06 16:38:30

數(shù)據(jù)庫其他數(shù)據(jù)庫

我不是DBA，僅僅是一個懂一點SELECT *的運維工程師，希望能有一個工具能夠幫助開發(fā)、DBA甚至運維降低數(shù)據(jù)庫的操作門檻。

數(shù)據(jù)庫在每個企業(yè)都占據(jù)的非常重要的位置，它存儲著一個公司的命脈。對于數(shù)據(jù)庫的管理也非常的復雜多變，很多公司都有專業(yè)的DBA團隊在管理。

但是，不論有無DBA，對數(shù)據(jù)庫的操作都不會變少，而且都面臨著相同的問題：

不是在提數(shù)就是在修數(shù)的路上
不是在審核SQL就是在審核SQL的路上
不是在找歷史記錄就是在找歷史記錄的路上
不是在備份就是在備份的路上

還有非常多類似的工作，這就讓DBA的工作變得枯燥乏味。

我不是DBA，僅僅是一個懂一點SELECT *的運維工程師，希望能有一個工具能夠幫助開發(fā)、DBA甚至運維降低數(shù)據(jù)庫的操作門檻，希望它具有：

流程審批功能
自動糾錯能力
自動備份能力
自動發(fā)布能力
歷史操作記錄
一鍵回滾能力
版本記錄能力

擁有這些能力，可以讓日常的操作變的簡單，高效。數(shù)據(jù)庫管理者也有時間去做更有意義的事情。

在過程的過程中，使用過不同的數(shù)據(jù)庫管理工具，比如Yearning、SQLE，它們本質上只是一個數(shù)據(jù)庫管理平臺，可以記錄日常的操作記錄，也能實現(xiàn)流程審批等能力。但是它們依舊是一個一個的孤島，無法直接打通開發(fā)、DBA之間的部門墻。

那有什么工具可以比它們更好？

也是偶然的機會，發(fā)現(xiàn)Bytebase這個項目，它的有點在于可以打通Gitlab->數(shù)據(jù)庫，這樣開發(fā)可以在Gitlab中管理SQL語句，其他的自動交給Bytebase去完成。

什么是Bytebase

Bytebase團隊把它定位成面向開發(fā)者可靠的數(shù)據(jù)庫CICD，它不僅僅是數(shù)據(jù)庫管理工具，更是連接開發(fā)和DBA的橋梁。

它到底具有什么樣的能力呢？

SQL審核
SQL糾錯
SQL編輯器
GitOps
備份恢復
多租戶管理

安裝部署

說一千，道一萬，不如手中過一遍。

這里，我選擇在Kubernetes中部署。

（1）首先，部署PG數(shù)據(jù)庫

---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: postgres-pv-claim
  labels:
    app: postgres
spec:
  storageClassName: longhorn
  accessModes:
  - ReadWriteOnce
  resources:
    requests:
      storage: 20Gi
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name:  postgres
  labels:
    app:  postgres
spec:
  selector:
    matchLabels:
      app: postgres
  replicas: 1
  strategy:
    rollingUpdate:
      maxSurge: 25%
      maxUnavailable: 25%
    type: RollingUpdate
  template:
    metadata:
      labels:
        app:  postgres
    spec:
      containers:
      - name:  postgres
        image:  postgres:15.2
        imagePullPolicy: IfNotPresent
        resources:
          requests:
            cpu: 100m
            memory: 100Mi
          limits:
            cpu: 4
            memory: 8000Mi
        env:
        - name: POSTGRES_PASSWORD
          value: '123456'
        - name: POSTGRES_USER
          value: 'bytebase'
        - name: POSTGRES_DB
          value: 'postgres'
        - name: PGDATA
          value: /var/lib/postgresql/data/pgdata
        ports:
        - containerPort:  5432
          name:  postgresport
        volumeMounts:
        - name: localtime
          mountPath: /etc/localtime
        - name: data-disk
          mountPath: /var/lib/postgresql/data
      volumes:
        - name: localtime
          hostPath:
            path: /usr/share/zoneinfo/Asia/Shanghai
        - name: data-disk
          persistentVolumeClaim:
            claimName: postgres-pv-claim
---
apiVersion: v1
kind: Service
metadata:
  name: postgres
spec:
  selector:
    app: postgres
  type: NodePort
  ports:
  - name: postgres
    port: 5432
    targetPort:
    protocol: TCP

需要給PG的數(shù)據(jù)做持久化，不然數(shù)據(jù)丟失就白忙活一場。

（2）部署B(yǎng)ytebase

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: bytebase-pvc
  labels:
    app: bytebase
spec:
  storageClassName: longhorn
  accessModes:
  - ReadWriteOnce
  resources:
    requests:
      storage: 50Gi
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name: bytebase
spec:
  selector:
    matchLabels:
      app: bytebase
  template:
    metadata:
      labels:
        app: bytebase
    spec:
      containers:
        - name: bytebase
          image: bytebase/bytebase:1.13.0
          imagePullPolicy: IfNotPresent
          env:
          - name: PG_URL
            value: "postgresql://bytebase:123456@postgres:5432/postgres"
          args:
            [
              "--data",
              "/var/opt/bytebase",
              "--external-url",
              "http://bytebase.jokerbai.com",
              "--port",
              "8080",
            ]
          ports:
            - containerPort: 8080
          volumeMounts:
            - name: data
              mountPath: /var/opt/bytebase
          livenessProbe:
            httpGet:
              path: /healthz
              port: 8080
            initialDelaySeconds: 300
            periodSeconds: 300
            timeoutSeconds: 60
      volumes:
      - name: data
        persistentVolumeClaim:
          claimName: bytebase-pvc
---
apiVersion: v1
kind: Service
metadata:
  name: bytebase-entrypoint
spec:
  type: ClusterIP
  selector:
    app: bytebase
  ports:
    - protocol: TCP
      port: 8080
      targetPort: 8080
---
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: bytebase
spec:
  rules:
  - host: bytebase.jokerbai.com
    http:
      paths:
      - backend:
          serviceName: bytebase-entrypoint
          servicePort: 8080
        path: /

（3）待應用都正常表示部署完成

# kubectl get po -n bytebase
NAME                        READY   STATUS    RESTARTS   AGE
bytebase-5559b7ff97-bmwc6   1/1     Running   0          5h18m
postgres-6989656975-5glhh   1/1     Running   0          5h20m