Nebula Operator 云上实践云原生图数据库nebula

本文首发于 Nebula Graph Community 公众号

文章图片

嗨，大家好！Nebula Operator 开源也有一段时间了，之前也有一篇相关的博客介绍，但是实践相关的博客却还没有，现在：
它来了！来了！它带着实践走来了！
Nebula Operator 介绍关于 Nebula Operator 的介绍，大家可以参考之前那篇博客：一文详解云上自动化部署集群管理工具 Nebula Operator。
本文将主要侧重于实践方向，让你能很快地入手 Nebula Operator，体验图数据库的乐趣！
Nebula Operator云上实践到这里，开始进入正题，本文将使用阿里云进行 Nebula Operator 实践，其他云厂商类似。
安装工具
本次实践需要在操作电脑上安装如下基础工具：

Kubectl
Helm
Docker

以上基础工具相关的安装方法请参考对应链接。
创建云上 Kubernetes
因为 Operator 是依托于 Kubernetes 的，所以在进行 Nebula Operator 实践之前，需要先准备好 Kubernetes 环境。
首先进入到阿里云的控制台，然后进入到容器服务 Kubernetes 版，再创建一个集群。此实践选择的是 ACK 托管版，相关的创建参数请按需选择。
注意：为了方便外网访问 Kubernetes API Server ，本次实践勾选了使用 EIP 暴露 API Server，你可以根据自身情况选择是否启用，如果不开启，你需要打通操作电脑与 Kubernetes 的之间网络。其他参数请按需选择。
等待 Kubernetes 集群启动后，将集群的连接信息中公网访问中的内容复制到计算机$HOME/.kube/config文件中。
然后你可以使用如下命令验证下 Kubernetes 集群：

$ kubectl get nodes NAMESTATUSROLESAGEVERSION cn-beijing.192.168.250.13Ready51mv1.20.4-aliyun.1 cn-beijing.192.168.250.185Ready51mv1.20.4-aliyun.1 cn-beijing.192.168.250.89Ready51mv1.20.4-aliyun.1

安装 Nebula Operator 依赖
在安装 Nebula Operator 之前，还需要先安装一些依赖。
安装 CertManager

# 安装 CertManager $ helm install cert-manager cert-manager --repo https://charts.jetstack.io \ --namespace cert-manager --create-namespace --version v1.3.1 \ --set installCRDs=true # 稍等一会儿，检测 CertManager 是否启动正常 $ kubectl -n cert-manager get pod NAMEREADYSTATUSRESTARTSAGE cert-manager-7998c69865-jfw9x1/1Running093s cert-manager-cainjector-7b744d56fb-846w91/1Running093s cert-manager-webhook-7d6d4c78bc-ssk4w1/1Running093s

安装 OpenKruise

# 安装 OpenKruise $ helm install kruise \ https://github.com/openkruise/kruise/releases/download/v0.8.1/kruise-chart.tgz # 稍等一会儿，检测 OpenKruise 是否启动正常 $ kubectl -n kruise-system get pod NAMEREADYSTATUSRESTARTSAGE kruise-controller-manager-6797f89d9b-ppv651/1Running049s kruise-controller-manager-6797f89d9b-wlkbd1/1Running049s kruise-daemon-7rljq1/1Running049s kruise-daemon-8kd8d1/1Running049s kruise-daemon-n6tdw1/1Running049s

添加 Nebula Operator Charts

# 添加 Nebula Operator Charts Repo $ helm repo add nebula-operator https://vesoft-inc.github.io/nebula-operator/charts # 更新 repo $ helm repo update

安装 Nebula Operator
由于阿里云上无法拉取gcr.io和k8s.gcr.io镜像，因此需要指定国内镜像，这里进行了如下替换：

原镜像	替换后镜像
gcr.io/kubebuilder/kube-rbac-proxy:v0.8.0	kubesphere/kube-rbac-proxy:v0.8.0
k8s.gcr.io/kube-scheduler:v1.18.8	kubesphere/kube-scheduler:v1.18.8

你可以通过如下命令查看所有可以设置的参数：

$ helm show values nebula-operator/nebula-operator

此次实践中的安装命令如下：

# 安装 Nebula Operator $ helm install nebula-operator nebula-operator/nebula-operator \ --namespace nebula-operator-system --create-namespace --version 0.1.0 \ --set image.kubeRBACProxy.image=kubesphere/kube-rbac-proxy:v0.8.0 \ --set image.kubeScheduler.image=kubesphere/kube-scheduler:v1.18.8 # 稍等一会儿，检测 Nebula Operator 是否启动正常 $ kubectl -n nebula-operator-system get pod NAMEREADYSTATUSRESTARTSAGE nebula-operator-controller-manager-deployment-6968547fff-k62b42/2Running019s nebula-operator-controller-manager-deployment-6968547fff-lhpdx2/2Running019s nebula-operator-scheduler-deployment-7c5fc7945-hbkv82/2Running019s nebula-operator-scheduler-deployment-7c5fc7945-sxc7w2/2Running019s

如果你自定义了 Kubernetes 的 Cluster Domain ，则需要修改安装命令，增加设置kubernetesClusterDomain，如下：

# 安装 Nebula Operator ，请修改 <> $ helm install nebula-operator nebula-operator/nebula-operator \ --namespace nebula-operator-system --create-namespace --version 0.1.0 \ --set image.kubeRBACProxy.image=kubesphere/kube-rbac-proxy:v0.8.0 \ --set image.kubeScheduler.image=kubesphere/kube-scheduler:v1.18.8 \ --set kubernetesClusterDomain=<>

部署 Nebula Cluster
至此，Nebula Operator 已经就绪，接下来安装Nebula Cluster来体验图数据吧！
首先，需要获取StorageClass，这个将会用来设置Nebula Cluster所使用的存储。

$ kubectl get sc NAMEPROVISIONERRECLAIMPOLICYVOLUMEBINDINGMODEALLOWVOLUMEEXPANSIONAGE alicloud-disk-availablediskplugin.csi.alibabacloud.comDeleteImmediatetrue100m alicloud-disk-efficiencydiskplugin.csi.alibabacloud.comDeleteImmediatetrue100m alicloud-disk-essddiskplugin.csi.alibabacloud.comDeleteImmediatetrue100m alicloud-disk-ssddiskplugin.csi.alibabacloud.comDeleteImmediatetrue100m alicloud-disk-topologydiskplugin.csi.alibabacloud.comDeleteWaitForFirstConsumertrue100m

从上面得知，阿里云目前支持5种StorageClass。此次实践将会使用alicloud-disk-ssd。其他云厂商会有对应的StorageClass，请按照实际情况进行选择。
*注意：每个云厂商可能对于申请存储的大小有范围限制，比如阿里云对于 SSD 限制在20 Gi到32,768 Gi，在创建Nebula Cluster的时候需要注意下。
你可以通过如下命令查看所有可以设置的参数：

$ helm show values nebula-operator/nebula-cluster

此次实践中的安装命令如下：

# 创建 Nebula Cluster 的名称 $ export NEBULA_CLUSTER_NAME=nebula # 创建 Nebula Cluster 的 namespace $ export NEBULA_CLUSTER_NAMESPACE=nebula # 创建 Nebula Cluster 的 StorageClass 名称，这里设置为之前查找到的 alicloud-disk-ssd $ export STORAGE_CLASS_NAME=alicloud-disk-ssd # 创建 Nebula Cluster 中每个组建所使用存储的大小 $ export STORAGE_SIZE_GRAPHD=20Gi $ export STORAGE_SIZE_METAD=20Gi $ export STORAGE_SIZE_STORAGED=20Gi # 创建 Nebula Cluster $ helm install ${NEBULA_CLUSTER_NAME} nebula-operator/nebula-cluster \ --namespace ${NEBULA_CLUSTER_NAMESPACE} --create-namespace --version 0.1.0 \ --set nameOverride=${NEBULA_CLUSTER_NAME} \ --set nebula.storageClassName="${STORAGE_CLASS_NAME}" \ --set nebula.graphd.storage="${STORAGE_SIZE_GRAPHD}" \ --set nebula.metad.storage="${STORAGE_SIZE_METAD}" \ --set nebula.storaged.storage="${STORAGE_SIZE_STORAGED}" # 稍等一会儿，检测 Nebula Cluster 是否启动正常 $ kubectl -n ${NEBULA_CLUSTER_NAMESPACE} get nebulacluster NAMEGRAPHD-DESIREDGRAPHD-READYMETAD-DESIREDMETAD-READYSTORAGED-DESIREDSTORAGED-READYAGE nebula2233334m10s $ kubectl -n ${NEBULA_CLUSTER_NAMESPACE} get pod NAMEREADYSTATUSRESTARTSAGE nebula-graphd-01/1Running096s nebula-graphd-11/1Running096s nebula-metad-01/1Running097s nebula-metad-11/1Running097s nebula-metad-21/1Running097s nebula-storaged-01/1Running097s nebula-storaged-11/1Running097s nebula-storaged-21/1Running097s

当然，也可以将Storaged实例升级到5个，执行命令如下：

# 升级 Nebula Cluster $ helm upgrade ${NEBULA_CLUSTER_NAME} nebula-operator/nebula-cluster \ --namespace ${NEBULA_CLUSTER_NAMESPACE} --create-namespace --version 0.1.0 \ --set nameOverride=${NEBULA_CLUSTER_NAME} \ --set nebula.storageClassName="${STORAGE_CLASS_NAME}" \ --set nebula.graphd.storage="${STORAGE_SIZE_GRAPHD}" \ --set nebula.metad.storage="${STORAGE_SIZE_METAD}" \ --set nebula.storaged.storage="${STORAGE_SIZE_STORAGED}" \ --set nebula.storaged.replicas=5 # 稍等一会儿，检测 Nebula Cluster 是否启动正常 $ kubectl -n ${NEBULA_CLUSTER_NAMESPACE} get nebulacluster NAMEGRAPHD-DESIREDGRAPHD-READYMETAD-DESIREDMETAD-READYSTORAGED-DESIREDSTORAGED-READYAGE nebula2233556m12s $ kubectl -n ${NEBULA_CLUSTER_NAMESPACE} get pod NAMEREADYSTATUSRESTARTSAGE nebula-graphd-01/1Running02m30s nebula-graphd-11/1Running02m30s nebula-metad-01/1Running02m30s nebula-metad-11/1Running02m30s nebula-metad-21/1Running02m30s nebula-storaged-01/1Running02m30s nebula-storaged-11/1Running02m30s nebula-storaged-21/1Running02m30s nebula-storaged-31/1Running052s nebula-storaged-41/1Running052s

详细的安装说明请见：使用 Helm 安装 Nebula Operator。
访问 Nebula Cluster
终于，Nebula Cluster 启动成功了，接下来开始访问集群吧！
Kubernetes 内部访问首先，在 Kubernetes 中启动一个 Nebula Graph Console，执行命令如下：

$ cat <



 
 然后再通过刚才创建的 Nebula Graph Console 来访问集群，如下：

 
 $ kubectl exec -it nebula-console -- \
nebula-console -u u -p p --addr ${NEBULA_CLUSTER_NAME}-graphd-svc.${NEBULA_CLUSTER_NAMESPACE}.svc --port 9669
2021/06/23 06:21:22 [INFO] connection pool is initialized successfully
Welcome to Nebula Graph!
(u@nebula) [(none)]> show hosts
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| Host| Port | Status| Leader count | Leader distribution| Partition distribution |
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-0.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-1.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-2.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-3.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-4.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "Total"||| 0|||
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
Got 4 rows (time spent 7669/9367 us)
Wed, 23 Jun 2021 06:21:26 UTC


 
 Kubernetes 外部访问 
 Kubernetes 内部的服务在集群外部要想访问，可以使用hostPort、hostNetwork、Ingress、LoadBalancer等。这里利用云厂商的便利性，直接使用LoadBalancer来访问集群。

 
 注意：此方法会暴露你的 Nebula 集群，请勿在生产环境使用。

 
 首先，将Graphd Service的type改成LoadBalancer，然后再查看EXTERNAL-IP。

 
 # 将 service 的 type 改成 LoadBalancer
$ kubectl patch -n ${NEBULA_CLUSTER_NAMESPACE} svc ${NEBULA_CLUSTER_NAME}-graphd-svc \
-p '{"spec": {"type": "LoadBalancer"}}'
# 获取 EXTERNAL-IP ，如果为 pending ，请稍等一会儿再重试
$ kubectl -n ${NEBULA_CLUSTER_NAMESPACE} get svc nebula-graphd-svc
NAMETYPECLUSTER-IPEXTERNAL-IPPORT(S)AGE
nebula-graphd-svcLoadBalancer172.16.85.222x.x.x.x9669:31460/TCP,19669:32579/TCP,19670:31481/TCP27m


 
 现在，可以根据EXTERNAL-IP来访问集群了，比如此处为x.x.x.x。

 
 $ export EXTERNAL_IP=x.x.x.x
$ docker run -it --rm vesoft/nebula-console:v2-nightly -u u -p p --addr ${EXTERNAL_IP} --port 9669
2021/06/23 06:42:17 [INFO] connection pool is initialized successfully
Welcome to Nebula Graph!
(u@nebula) [(none)]> show hosts
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| Host| Port | Status| Leader count | Leader distribution| Partition distribution |
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-0.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-1.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-2.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-3.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "nebula-storaged-4.nebula-storaged-headless.nebula.svc.cluster.local" | 9779 | "ONLINE" | 0| "No valid partition" | "No valid partition"|
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
| "Total"||| 0|||
+-----------------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
Got 4 rows (time spent 3747/60433 us)
Wed, 23 Jun 2021 06:42:21 UTC


 
 享用时间 
 大功告成！

 
 【Nebula Operator 云上实践】尽情地在 Nebula Graph 中驰骋吧！



		  	

    
    




    
    
    


推荐阅读

           
                  
              
                  色母片是什么 
                
                   
                
              
            

                  
              
                  mysql怎么查找递归 sql实现mysql递归查询 
                
                   
                
              
            

                  
              
                  java数组基础详解 
                
                   
                
              
            

                  
              
                  宝宝|婴幼儿意外伤害第一时间如何正确处置？ 
                
                   
                
              
            

                  
              
                  mysql服务层中解析器包含哪些功能 mysql解析器是什么 
                
                   
                
              
            

                  
              
                  别出心裁的“烧南北” 
                
                   
                
              
            

                  
              
                  真机|小米又站起来了！MIX 4真机屏幕曝光：这效果太好 
                
                   
                
              
            

                  
              
                  水果拼盘常用水果 三种水果拼盘图片 
                
                   
                
              
            

                  
              
                  品质分析方法,统计学分析方法有哪些 
                
                   
                
              
            

                  
              
                  2023年北京郁金香文化节有几个展区参加 2023年北京郁金香文化节有几个展区 
                
                   
                
              
            

                  
              
                  拍摄延时摄影用什么格式，延时摄影的图片格式 
                
                   
                
              
            

                  
              
                  htcG13手机应该下个什么文件阅读器或者浏览器？一打开爱奇艺就自动把视频 图片查看器 音乐播放器全改成了爱奇艺万能播放器， 
                
                   
                
              
            

                  
              
                  轻轨是地铁吗 
                
                   
                
              
            

                  
              
                  mysql解压tar 
                
                   
                
              
            

                  
              
                  百度导航下载导航，百度地图导航下载 
                
                   
                
              
            

                  
              
                  go语言控制台输出 go语言控制台输入 
                
                   
                
              
            

                  
              
                  预算在1500,如何配置一台玩DNF的电脑？ 
                
                   
                
              
            

                  
              
                  破晓色是什么颜色？ 
                
                   
                
              
            

                  
              
                  工程竣工验收需要哪些资料？ 工程竣工验收需要哪些资料 
                
                   
                
              
            

                  
              
                  比亚迪s7报价多少 比亚迪s7报价多少? 
                
                   
                
              
            

          

赠己诗 
 八、「料理风云」 
 西湖游 
 两短篇 
 9531 
 NeuVector 会是下一个爆款云原生安全神器吗（） 
 S8大连侠盗勇士 
 走向天空，走向云（小说）３ 
 2018年7月11日|2018年7月11日 星期三 多云转晴（18） 
 (全员向连载)云间当铺（一）