GraphScope|GraphScope 集群部署
GraphScope 集群部署
1 k8s集群搭建
大致步骤如下:
- 安装docker。在ubuntu上,可以简单的通过命令
sudo apt install docker.io
来安装。 - 安装kubelet、kubeadm、kubectl。由于国内源无法访问,可能需要添加镜像,比如:
tee /etc/apt/sources.list <<-'EOF'
deb https://mirrors.aliyun.com/kubernetes/apt kubernetes-xenial main
EOF
- 安装网络插件。如Calico。
https://pan.baidu.com/s/1c89VAq_1qPBf_5URqSkBdw提取码wpwb
获取。获取之后
unzip dubheDeployScriptfile.zip
cd dubheDeployScriptfile/k8s1.16.2-ubuntu/
配置base.config
# 主节点(master节点)IP地址
masterip="172.16.123.1"# 过滤IP段,用于过滤得到服务器的IP地址
ip_segment="172.16.123"# k8s版本
k8s_version="v1.16.2"# root用户密码,请设置k8s集群所有服务器root用户密码为统一密码
root_passwd="abcdefghijklmn"# 集群所有节点ip,有几台填几台
hostip=(
172.16.123.1
172.16.125.2
172.16.125.3
)
#以下两项会自动生成,不用填写!
tocken=
sha_value=
https://www.it610.com/article/
然后运行
bash k8s1.16.2.sh
运行方式基本按照文档中说明,其中有两点需要注意:
- 在非主节点上都开启ssh的root访问权限,并在base.config中配置密码。这一步主要是拷贝
apt-key.gpg base.config node_install_k8s.sh del_kube.sh ssh_trust_init.exp ssh_trust_add.exp
这几个文件到worker节点。如果有其它方式拷贝,也可以不管,到这一步,master节点的集群基本部署成功。其中base.config
中的保存了主节点的token和sha_value,这两个值对worker节点加入集群至关重要,取值样例如下:
token=s52vwv.gdx1qymhrdx8v5uq
sha_value=https://www.it610.com/article/88c78df7457c1f74e065fbedd9ddee967cc4a4e4dd003e69f9d64374e3e5d903
- 如果多次运行脚本,base.config中的token和sha_value会被反复串接,此时在worker节点运行会无法加入master节点。每次重新运行脚本要把base.config中的token和sha_value清空。即使串接了,也能识别出来,只是要手动加入,当前主节点的token和sha_value应分别为前23位(以 . 号分隔)和前64位。
kubeadm join 172.16.125.100:6443 --token 8urlva.75zrerl6uctfenec \
--discovery-token-ca-cert-hash sha256:c462c05da6c3685a334b1b1743d4d9b30a38b78208c338f03f5e7d67befaf8bb
注意token和sha256都要替换成对应的master节点的token和sha256。
2 拉取graphscope镜像 这个GraphScope提供的官方安装教程没有说明,在其一键安装脚本里倒有体现(这个脚本不太好用,亲测没有安装成功过)。这个主要影响graphscope创建会话的时候,比如
import graphscope
graphscope.set_option(show_log=True)
sess = graphscope.session()
【GraphScope|GraphScope 集群部署】在没有提前拉取镜像的情况下,创建
session
的时候就会卡住或者出错,因为创建的时候默认是会去拉取docker镜像的, 而这个镜像很大(有8.39GB),网络条件不好的情况下很难拉取成功。所以最好提前拉取:docker pull registry.cn-hongkong.aliyuncs.com/graphscope/graphscope:0.8.0
docker pull quay.io/coreos/etcd:v3.4.13
0.8.0
是安装的graphscope版本号,可以通过命令python -c "import graphscope;
print(graphscope.__version__)"
获得。如果是用kind安装的,还要运行以下命令:
kind load docker-image registry.cn-hongkong.aliyuncs.com/graphscope/graphscope:0.8.0
kind load docker-image quay.io/coreos/etcd:v3.4.13
推荐阅读
- Beego打包部署到Linux
- 私有化轻量级持续集成部署方案--03-部署web服务(下)
- federation--kubernetes集群联邦的实现
- Spring|Spring Boot部署到Resin遇到的问题
- (1)redis集群原理及搭建与使用(1)
- 如何在阿里云linux上部署java项目
- 部署专题集合
- jar|springboot项目打成jar包和war包,并部署(快速打包部署)
- 一键编译部署Mysql
- 8月16日|8月16日 全网备份