跳转至

ElasticSearch 数据塞满如何操作?

当 ElasticSearch 内存占满时,可以选择扩容或者删除数据来解决:

你可以运行如下命令查看 ES 节点的资源占比。

kubectl get pod -n mcamel-system | grep common-es-cluster-masters-es | awk '{print $1}' | xargs -I {} kubectl exec {} -n mcamel-system -c elasticsearch -- df -h | grep /usr/share/elasticsearch/data

扩容

在主机节点还有资源的情况下, 扩容 是一种常见的方案,也就是提高 PVC 的容量。

  1. 先运行以下命令获取 es-data-0 节点的 PVC 配置,请以实际的环境的 PVC 为准。

    kubectl edit -n mcamel-system pvc elasticsearch-data-mcamel-common-es-cluster-masters-es-data-0
    
  2. 然后修改以下 storage 字段(需要使用的存储类 SC 可以扩容)

    spec:
      accessModes:
        - ReadWriteOnce
      resources:
        requests:
          storage: 35Gi # (1)!
    
    1. 这个数值需调整

删除数据

当 ElasticSearch 内存占满时,你还可以删除 index 数据释放资源。

你可以参考以下步骤进入 Kibana 页面,手动执行删除操作。

  1. 首先明确 Kibana Pod 是否存在并且正常运行:

    kubectl get po -n mcamel-system |grep mcamel-common-es-cluster-masters-kb
    
  2. 若不存在,则手动设置 replica 为 1,并且等待服务正常运行;若存在,则跳过该步骤

    kubectl scale -n mcamel-system deployment mcamel-common-es-cluster-masters-kb --replicas 1
    
  3. 修改 Kibana 的 Service 为 NodePort 暴露访问方式

    kubectl patch svc -n mcamel-system mcamel-common-es-cluster-masters-kb-http -p '{"spec":{"type":"NodePort"}}'
    
    # 修改完成后查看 NodePort。此例的端口为 30128,则访问方式为 https://{集群中的节点IP}:30128
    [root@insight-master1 ~]# kubectl get svc -n mcamel-system |grep mcamel-common-es-cluster-masters-kb-http
    mcamel-common-es-cluster-masters-kb-http   NodePort    10.233.51.174   <none>   5601:30128/TCP    108m
    
  4. 获取 ElasticSearch 的 Secret,用于登录 Kibana(用户名为 elastic)

    kubectl get secrets -n mcamel-system mcamel-common-es-cluster-masters-es-elastic-user -o jsonpath="{.data.elastic}" |base64 -d
    
  5. 进入 Kibana -> Stack Management -> Index Management ,打开 Include hidden indices 选项,即可见所有的 index。 根据 index 的序号大小,保留序号大的 index,删除序号小的 index。

评论