前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Kubernetes搭建Yearning与简单使用

Kubernetes搭建Yearning与简单使用

原创
作者头像
对你无可奈何
发布2023-02-01 15:04:28
1.1K0
发布2023-02-01 15:04:28
举报
文章被收录于专栏:运维专栏运维专栏

背景:

数据库基本为myql,数量不是很多,过去一直默认开启了防火墙模式通过公司固定IP,远程访问操作mysql。疫情原因,一些小伙伴不喜欢远程通过公司的网络去连接mysql,频繁添加防火墙操作。并且对数据库的操作及其不规范,没有访问操作的日志,也没有各种审核。虽然每次操作数据库前会对数据库进行备份。但是这样的安全操作隐患还是很严重的。在此背景下发现还是需要一款mysql审计平台,规范化数据库的操作。常年混迹于github的我搜索关键词 mysql 审计找到了 Yearning,当然了可以更方便的在gitee的仓库去看!

image.png
image.png

向下滑README.md找到官网or Install 安装及使用日志(貌似其实都跳转到官网了)

image.png
image.png

跳转到官方页面点击指南有二进制包 and docker kubernetes的安装方式,个人是习惯all in kubernetes就选择kubernetes的安装方式了!

image.png
image.png

Kubernetes搭建Yearning

注:参照官方文档操作:https://next.yearning.io/guide/cloud.html

前提:

mysql 版本必须为5.7及以上版本(8.0及以上请将sql_mode 设置为空)并已事先自行安装完毕且创建 Yearning 库,字符集应为 UTF8mb4 (仅 Yearning 所需 mysql 版本)

image.png
image.png

咱的数据库直接用的腾讯云的cdb,创建了数据库,并完成了授权!

创建Namespace

创建一个单独的命名空间搭建yearning,当然了也可以在其他已有的命名空间搭建。完全可以根据个人需求喜好

代码语言:txt
复制
kubectl create ns yearning

创建Secret

注:这里手贱点开了,来自知乎的连接,按照知乎的文档跑了一遍,顺便给大家加深一下印象!

image.png
image.png

对应配置使用base64加密

代码语言:txt
复制
echo -n 'addr' | base64  #数据库地址包括端口
echo -n 'user' | base64  #数据库用户名
echo -n 'pass' | base64  #数据库密码
echo -n 'data' | base64  #yearning对应数据库名

创建secret.yaml并创建secret密钥

cat secret

代码语言:txt
复制
apiVersion: v1
kind: Secret
metadata:
  name: db-conf
  namespace: yearning
type: Opaque  # 使用的是generic类型
data:   # 这里配置的是数据库的相关信息,使用base64加密输入: # echo -n 'xxxx' | base64
  addr: xxxxxxxxxxxxxx=
  user: exxxxxx=
  pass: xxxxxxx==
  data: xxxxxx=
代码语言:txt
复制
kubectl apply -f secret.yaml
kubectl get secret -n yearning
image.png
image.png
image.png
image.png

创建 yearning Deployment

代码语言:txt
复制
apiVersion: apps/v1 # API版泵
kind: Deployment  # 资源类型
metadata: # 元数据
  labels: # 标签
    app: yearning
  name: yearning  # deployment的名字
  namespace: yearning  # 所属命名空间
spec: 
  replicas: 3 # 副本数
  selector: # 选择器,选择针对谁做
    matchLabels:
      app: yearning
  template: # 镜像的模板
    metadata: # 元数据
      labels: # 标签
        app: yearning
    spec:
      containers: # 容器信息
        - image: chaiyd/yearning # 容器镜像
          name: yearning # 容器的名字
          imagePullPolicy: IfNotPresent # 镜像的下载策略
          env:  # 容器中的变量
            - name: MYSQL_ADDR
              valueFrom:
                secretKeyRef: # 存储的变量信息
                  name: db-conf
                  key: addr
            - name: MYSQL_USER
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: user
            - name: MYSQL_PASSWORD
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: pass
            - name: MYSQL_DB
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: data
          ports:    # 定义容器中的端口信息
            - containerPort: 8000
              name: web
              protocol: TCP
          readinessProbe:   # 就绪检查
            httpGet:
              path: /
              port: web
              scheme: HTTP
            initialDelaySeconds: 25
            periodSeconds: 2
          livenessProbe:    # 存活检查
            httpGet:
              path: /
              port: web
              scheme: HTTP
            initialDelaySeconds: 30
            periodSeconds: 2
          resources:    # 资源限制
            requests:
              cpu: 200m
              memory: 1Gi
            limits:
              cpu: 250m
              memory: 2Gi
代码语言:txt
复制
kubectl apply -f deployment.yaml
kubectl get pods -n yearning
image.png
image.png

等待三个pod running

创建Service

当然了,这里是看个人操作,我一般是deployment与service一起创建的。这里就按照这文档步骤一步一步来吧!

cat service.yaml

代码语言:txt
复制
apiVersion: v1
kind: Service
metadata:
  labels:
    app: yearning
  name: yearning
  namespace: yearning
spec:
  ports:
    - port: 8000  # svc内部端口,通过clusterIP访问
      protocol: TCP
      targetPort: 8000  # 镜像内服务的端口
  selector: # 标签选择器,与deployment中的标签保持一致
    app: yearning

文档都喜欢将 svc内部端口搞成80?我是个人不喜欢这样 习惯port=targetPort。type也习惯cluserIP,这些东西都可以看个人的规划!

image.png
image.png
代码语言:txt
复制
kubectl apply -f service.yaml 
kubectl get svc -n yearning
image.png
image.png

创建Ingress对外暴露服务

业务ingress映射我的是traefik,参照:Kubernetes 1.20.5 安装traefik在腾讯云下的实践

cat ingress.yaml

代码语言:txt
复制
apiVersion: networking.k8s.io/v1
kind: Ingress
metadata:
  annotations:
    kubernetes.io/ingress.class: traefik
    traefik.ingress.kubernetes.io/router.entrypoints: web
  name: yearning
  namespace: yearning
spec:
  rules:
  - host: master-yearning.xxxx.com
    http:
      paths:
      - backend:
          service:
            name: yearning
            port:
              number: 8000
        path: /
        pathType: Prefix
代码语言:txt
复制
kubectl apply -f ingress.yaml
kubectl get ingress -n yearning
image.png
image.png

浏览器访问web与各种隐藏的问题:

数据库脚本问题

浏览器访问:master-yearning.xxxx.com。输入默认的账户密码admin/Yearning_admin.无法登陆?what?登陆数据库管理控制台core_accounts 用户数据为空,杂搞?

image.png
image.png

想不到好的方法,偷懒了一下采用一下二进制的方式搞一波:参照http://next.yearning.io/guide/install.html

下载release包并解压,修改conf.toml

代码语言:txt
复制
ubuntu@ap-shanghai-k8s-master-1:~/mysqld/Yearning$ cat conf.toml
[Mysql]
Db = "Yearning"
Host = "xxx"
Port = "3306"
Password = "xxxxx"
User = "xxxxx"

执行Yearning install 完成数据库初始化

代码语言:txt
复制
./Yearning install

登陆mysql管理控制台发现用户生成

image.png
image.png

浏览器继续登陆master-yearning.xxxx.com or delete 一下deployment and apply重新生成一下:

正常来说可以进入yearning控制台:

image.png
image.png

接着问题又来了:貌似是在创建用户的时候?一直提示我:config.toml文件中SecretKey值必须为16位!没有办法搞?

image.png
image.png

仔细看一眼文档:http://next.yearning.io/guide/cloud.html

secret有一个sk的 data!重新生成一下:

代码语言:txt
复制
echo -n 'xxxx' | base64 #xxxx要16位
代码语言:txt
复制
apiVersion: v1
kind: Secret
metadata:
  name: db-conf
  namespace: yearning
type: Opaque  # 使用的是generic类型
data:   # 这里配置的是数据库的相关信息,使用base64加密输入: # echo -n 'xxxx' | base64
  addr: xxxxxx=
  user: xxxxxx=
  pass: xxxxx==
  data: xxxxxx=
  sk: xxxxx==
代码语言:txt
复制
kubectl apply -f secret.yaml
kubectl get secret -n yearning

deployment中也增加SECRET_KEY sk的相关配置

cat deployment.yaml

代码语言:txt
复制
apiVersion: apps/v1 # API版泵
kind: Deployment  # 资源类型
metadata: # 元数据
  labels: # 标签
    app: yearning
  name: yearning  # deployment的名字
  namespace: yearning  # 所属命名空间
spec: 
  replicas: 3 # 副本数
  selector: # 选择器,选择针对谁做
    matchLabels:
      app: yearning
  template: # 镜像的模板
    metadata: # 元数据
      labels: # 标签
        app: yearning
    spec:
      containers: # 容器信息
        - image: chaiyd/yearning  # 容器镜像
          name: yearning # 容器的名字
          imagePullPolicy: IfNotPresent # 镜像的下载策略
          env:  # 容器中的变量
            - name: MYSQL_ADDR
              valueFrom:
                secretKeyRef: # 存储的变量信息
                  name: db-conf
                  key: addr
            - name: MYSQL_USER
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: user
            - name: MYSQL_PASSWORD
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: pass
            - name: MYSQL_DB
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: data
            - name: SECRET_KEY
              valueFrom:
                secretKeyRef:
                  name: db-conf
                  key: sk
          ports:    # 定义容器中的端口信息
            - containerPort: 8000
              name: web
              protocol: TCP
          readinessProbe:   # 就绪检查
            httpGet:
              path: /
              port: web
              scheme: HTTP
            initialDelaySeconds: 25
            periodSeconds: 2
          livenessProbe:    # 存活检查
            httpGet:
              path: /
              port: web
              scheme: HTTP
            initialDelaySeconds: 30
            periodSeconds: 2
          resources:    # 资源限制
            requests:
              cpu: 200m
              memory: 1Gi
            limits:
              cpu: 250m
              memory: 2Gi
代码语言:txt
复制
kubectl apply -f deployment.yaml
kubectl get pods -n yearning

到这里安装的流程就没有什么问题了。请尽量参照官方文档:http://next.yearning.io/guide/cloud.html。数据库问题,可参考一下二进制的方式,能减少入坑。

Yearning的初步使用

修改admin密码

处于安全方面考虑,第一步骤应该是修改管理员密码:

image.png
image.png

创建新用户

image.png
image.png

单击编辑将zhangpeng设置为非审计人

image.png
image.png

还有权限?盲猜一下是权限组里面设置?后面再看

image.png
image.png

添加数据源

创建一个环境

竟然可以创建环境搜一下先创建个环境意思一下:

image.png
image.png

左侧栏-自定义环境添加一下Tencent环境保存

image.png
image.png

环境具体什么用呢?我是不是可以区分正式 qa 开发环境?这里就只演示一下了....我也是第一次用......昨天跑了一遍,今天是重复了 稍微顺畅了一下!

添加数据源

添加数据源这里发现要先设置一个流程!

image.png
image.png

创建流程

image.png
image.png

数据源

image.png
image.png

保存数据成功如下图:

image.png
image.png

创建一个权限组并将用户加入用户组

创建一个权限组zhangpeng,DDL,DML,QUERY权限都先加入了....

image.png
image.png

将admin zhanpeng 用户加入zhangpeng用户组(这里的组是不是应该有其他用法?但是这里不添加后续工单申请看不到数据源)

image.png
image.png
image.png
image.png

登陆普通用户zhangpeng创建工单

登陆普通用户

开一个火狐浏览器,登陆zhangpeng用户

image.png
image.png

创建工单

一定记的普通用户也要加入权限组,否则DML DDL 查询这里无法显示数据源!

image.png
image.png

关于DML DDL将真我都分不太清,数据库用的真心很少, 也没有太多触碰。基本应该是下面这样的定义的?

DML(Data Manipulate Language):数据操作语言。对表中的数据进行增加、删除、修改

DDL(Data Define Languge):数据定义语言。对数据库和表进行管理,例如创建、修改、删除等。

注意:参照:SQL语言之DML & DDL

不管了玩一个简单的创建数据库的例子?

工单申请-DDL-工单申请

image.png
image.png

填写SQL这里右击鼠标进行SQL检测

image.png
image.png
image.png
image.png
image.png
image.png

审计人审批工单

zhangpeng用户的定义就是普通用户,admin用户这里就做审计人

登陆admin的控制台:

点击审核-工单-找到要审核工单点击详情

image.png
image.png

找到sql语句右击鼠标SQL检测

image.png
image.png

等待SQL检测通过点击右上角同意审批工单

image.png
image.png

等待工单运行完成

)

image.png
image.png
image.png
image.png

当然了完成后zhangpeng用户下也可以看到工单审核完成

image.png
image.png

验证

查看一下是否创建成功?

admin or zhangpeng用户工单申请这里 DML 或者DDL工单申请这里数据库选项栏可以看到zhangpeng数据库已经创建成功了

image.png
image.png

当然了也可以登陆数据库后台查看10.0.2.2进行确认一下:

image.png
image.png

这里就只进行简单的数据库创建的操作流程了抛砖引玉!

总结:

  1. 安装搭建尽量按照官方最新文档来,数据库如果不能创建sql数据可以尝试二进制方式生成数据库数据。
  2. 第一次用还是不太习惯,比如权限组的定义还有所谓的审批流程,以及用户的角色定义。
  3. 希望Yearning实现的功能 能否导入云数据库?比如阿里云 腾讯云的 数据库?
  4. DDL DML这里 在CREATE database的时候要选择一个数据库?这个地方有点不合理,希望后面能改进。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 背景:
  • Kubernetes搭建Yearning
    • 前提:
      • 创建Namespace
        • 创建Secret
          • 对应配置使用base64加密
          • 创建secret.yaml并创建secret密钥
        • 创建 yearning Deployment
          • 创建Service
            • 创建Ingress对外暴露服务
              • 浏览器访问web与各种隐藏的问题:
                • 数据库脚本问题
                • secret有一个sk的 data!重新生成一下:
                • deployment中也增加SECRET_KEY sk的相关配置
            • Yearning的初步使用
              • 修改admin密码
                • 创建新用户
                  • 添加数据源
                    • 创建一个环境
                    • 添加数据源
                    • 创建流程
                    • 数据源
                    • 创建一个权限组并将用户加入用户组
                  • 登陆普通用户zhangpeng创建工单
                    • 登陆普通用户
                    • 创建工单
                  • 审计人审批工单
                    • 验证
                    • 总结:
                    相关产品与服务
                    访问管理
                    访问管理(Cloud Access Management,CAM)可以帮助您安全、便捷地管理对腾讯云服务和资源的访问。您可以使用CAM创建子用户、用户组和角色,并通过策略控制其访问范围。CAM支持用户和角色SSO能力,您可以根据具体管理场景针对性设置企业内用户和腾讯云的互通能力。
                    领券
                    问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档