当前位置:

首页 > 系统应用 > Kubernetes部署Nebula图数据库集群

Kubernetes部署Nebula图数据库集群

本文首发于 Nebula Graph 官网:https://nebula-graph.com.cn/posts/how-to-deploy-nebula-graph-in-kubernetes/Kubernetes 是什么Kubernetes 是一个开源的,用于管理云平台中多个主机上的容器化的应用,

本文目录

    本文首发于 Nebula Graph 官网:https://nebula-graph.com.cn/posts/how-to-deploy-nebula-graph-in-kubernetes/

    Kubernetes 是什么

    Kubernetes 是一个开源的,用于管理云平台中多个主机上的容器化的应用,Kubernetes 的目标是让部署容器化的应用简单并且高效,Kubernetes 提供了应用部署,规划,更新,维护的一种机制。

    Kubernetes在设计结构上精心定义了一系列构建模块,其目的在于提供一种能够部署、维护以及扩展应用程序的机制。组成Kubernetes的各个组件,其设计理念秉持着松耦合与可扩展的原则,如此一来,便能满足多样化的工作负载需求。而可扩展性在很大程度上是由Kubernetes API所赋予的,该API主要被用作扩展的内部组件以及在Kubernetes上运行的容器。

    Kubernetes 主要由以下几个核心组件组成:

    • etcd 保存了整个集群的状态
    • kube-apiserver提供了资源操作的唯一入口,并提供认证、授权、访问控制、API 注册和发现等机制
    • kube-controller-manager负责维护集群的状态,比如故障检测、自动扩展、滚动更新等
    • kube-scheduler负责资源的调度,按照预定的调度策略将Pod调度到相应的机器上
    • kubelet负责维护容器的生命周期,同时也负责 Volume和网络的管理
    • kube-proxy负责为 Service 提供 cluster 内部的服务发现和负载均衡

    Kubernetes 和数据库

    数据库容器化是最近的一大热点,那么 Kubernetes 能为数据库带来什么好处呢?

    • 故障恢复:Kubernetes 提供故障恢复的功能,数据库应用如果宕掉,Kubernetes 可以将其自动重启,或者将数据库实例迁移到集群中其他节点上
    • 存储管理:Kubernetes 提供了丰富的存储接入方案,数据库应用能透明地使用不同类型的存储系统
    • 负载均衡:Kubernetes Service 提供负载均衡功能,能将外部访问均衡到不同的数据库实例副本上
    • 水平拓展:Kubernetes 可以根据当前数据库集群的资源利用率情况,缩放副本数目,从而提升资源的利用率

    目前很多数据库,如:MySQL,MongoDB 和 TiDB 在 Kubernetes 集群中都能运行良好。

    Nebula Graph 在 Kubernetes 中的实践

    Nebula Graph是一款分布式的开源图数据库,主要由三部分组成:负责查询引擎的graphd、负责数据存储的storaged,以及负责管理元数据的meted。在Kubernetes实践中,它为图数据库Nebula Graph带来了以下好处:

    • Kubernetes 能均衡 nebula graphd,metad 和 storaged 不同副本之间的负载。graphd,metad 和 storaged 可以通过 Kubernetes 的域名服务自动发现彼此。
    • 通过 StorageClass,PVC 和 PV 可以屏蔽底层存储细节,无论使用本地卷还是云盘,Kubernetes 均可以透明对接。
    • 通过 Kubernetes 可以在数秒内成功部署一套 Nebula 集群,Kubernetes 也可以无感知地实现 Nebula 集群的升级。
    • Nebula 集群通过 Kubernetes 可以做到自我恢复,单体副本 crash,Kubernetes 可以重新将其拉起,无需运维人员介入。
    • Kubernetes 可以根据当前 Nebula 集群的资源利用率情况弹性伸缩集群规模,从而提升集群的性能。

    下面来讲解下具体的实践内容。

    集群部署

    硬件和软件要求

    这里主要罗列下本文部署涉及到的机器、操作系统参数

    • 操作系统使用的 CentOS-7.6.1810 x86_64
    • 虚拟机配置
      • 4 CPU
      • 8G 内存
      • 50G 系统盘
      • 50G 数据盘 A
      • 50G 数据盘 B
    • Kubernetes 集群版本 v1.14+
    • Nebula 版本为 v2.0.0-rc1
    • 使用本地 PV 作为数据存储
    • CoreDNS 版本 1.6.0+

    K8s 集群规划

    以下为集群清单

    服务器 IPnebula 实例role192.168.0.1 master192.168.0.2graphd, metad-0, storaged-0node192.168.0.3graphd, metad-1, storaged-1node192.168.0.4graphd, metad-2, storaged-2node

    K8s 待部署组件

    • 安装 Helm3
    • 准备本地磁盘,并安装本地卷插件
    • 安装 nebula 集群

    安装 Helm3

    Helm 是 Kubernetes 集群上的包管理工,使用 Helm 可以极大地降低使用 Kubernetes 部署应用的门槛。本文不做 Helm 详细介绍,有兴趣的小伙伴可自行阅读《Helm 入门指南》。

    下载安装 Helm

    使用下面命令在终端执行即可安装 Helm

    $ wget https://get.helm.sh/helm-v3.5.2-linux-amd64.tar.gz
    $ tar -zxvf helm/helm-v3.5.2-linux-amd64.tgz
    $ mv linux-amd64/helm /usr/bin/helm

    查看 Helm 版本

    执行 helm version命令即可查看对应的 Helm 版本,以文本为例,以下为输出结果:

    version.BuildInfo{Version:"v3.5.2", GitCommit:"167aac70832d3a384f65f9745335e9fb40169dc2", GitTreeState:"dirty", GoVersion:"go1.15.7"}

    设置本地磁盘

    在每台机器上做如下配置

    创建 mount 目录

    $ sudo mkdir -p /mnt/disks

    格式化数据盘

    $ sudo mkfs.ext4 /dev/diskA
    $ sudo mkfs.ext4 /dev/diskB

    挂载数据盘

    $ DISKA_UUID=$(blkid -s UUID -o value /dev/diskA)
    $ DISKB_UUID=$(blkid -s UUID -o value /dev/diskB)
    $ sudo mkdir /mnt/disks/$DISKA_UUID
    $ sudo mkdir /mnt/disks/$DISKB_UUID
    $ sudo mount -t ext4 /dev/diskA /mnt/disks/$DISKA_UUID
    $ sudo mount -t ext4 /dev/diskB /mnt/disks/$DISKB_UUID

    $ echo UUID=`sudo blkid -s UUID -o value /dev/diskA` /mnt/disks/$DISKA_UUID ext4 defaults 0 2 | sudo tee -a /etc/fstab
    $ echo UUID=`sudo blkid -s UUID -o value /dev/diskB` /mnt/disks/$DISKB_UUID ext4 defaults 0 2 | sudo tee -a /etc/fstab

    部署本地卷插件

    $ curl https://github.com/kubernetes-sigs/sig-storage-local-static-provisioner/archive/v2.4.0.zip
    $ unzip v2.4.0.zip

    修改 v2.4.0/helm/provisioner/values.yaml classes 部分:

    • 将 hostDir: /mnt/fast-disks 改成 hostDir: /mnt/disks,# storageClass: true 改成 storageClass: true。然后执行:
    $ helm install local-static-provisioner --namespace default sig-storage-local-static-provisioner/helm/provisioner
    # 查看 local-static-provisioner 部署情况
    $ helm list
    NAME NAMESPACE REVISION UPDATED STATUS CHART APP VERSION
    local-volume-provisioner default 1 2021-02-10 11:06:34.3540341 +0800 CST deployed provisioner-2.4.0 2.4.0

    部署 nebula 集群

    下载 nebula helm chart

    # 下载 nebula chart
    $ helm repo add nebula-charts https://vesoft-inc.github.io/nebula-docker-compose
    $ helm pull nebula-charts/nebula
    $ tar -zxvf nebula-v2.0.0.tgz

    设置 Kubernetes node节点

    下面是 Kubernetes 节点列表,我们需要设置 node 节点的调度标签。可以将 192.168.0.2,192.168.0.3,192.168.0.4打上 nebula: "cloud" 的标签。

    服务器 IPkubernetes rolesnodeName192.168.0.1master192.168.0.1192.168.0.2node192.168.0.2192.168.0.3node192.168.0.3192.168.0.4node192.168.0.4

    具体操作如下:

    $ kubectl  label node 192.168.0.2 nebula="cloud" --overwrite
    $ kubectl label node 192.168.0.3 nebula="cloud" --overwrite
    $ kubectl label node 192.168.0.4 nebula="cloud" --overwrite

    调整 values 默认值

    nebula helm chart 目录如下:

    nebula
    ├── Chart.yaml
    ├── README.md
    ├── templates
    │ ├── configmap.yaml
    │ ├── deployment.yaml
    │ ├── _helpers.tpl
    │ ├── NOTES.txt
    │ ├── pdb.yaml
    │ ├── serviceaccount.yaml
    │ ├── service.yaml
    │ └── statefulset.yaml
    └── values.yaml

    1 directory, 11 files

    可以根据运行环境需求修改 charts/nebula/values.yaml 里面的默认值

    通过 helm 安装 nebula

    $ helm install nebula charts/nebula
    # 查看部署状态
    $ helm status nebula
    NAME: nebula
    LAST DEPLOYED: Fri Feb 19 12:58:16 2021
    NAMESPACE: default
    STATUS: deployed
    REVISION: 1
    TEST SUITE: None
    NOTES:
    Nebula Graph Cluster installed!

    1. Watch all containers come up.
    $ kubectl get pods --namespace=default -l app.kubernetes.io=nebula -w
    # 查看 K8s 集群上 nebula 部署情况
    $ kubectl get pods --namespace=default -l app.kubernetes.io=nebula
    NAME READY STATUS RESTARTS AGE
    nebula-graphd-676cfcf797-4q7mk 1/1 Running 0 6m
    nebula-graphd-676cfcf797-whwqp 1/1 Running 0 6m
    nebula-graphd-676cfcf797-zn5l6 1/1 Running 0 6m
    nebula-metad-0 1/1 Running 0 6m
    nebula-metad-1 1/1 Running 0 6m
    nebula-metad-2 1/1 Running 0 6m
    nebula-storaged-0 1/1 Running 0 6m
    nebula-storaged-1 1/1 Running 0 6m
    nebula-storaged-2 1/1 Running 0 6m

    访问 nebula 集群:

    $ kubectl get service nebula-graphd
    NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
    nebula-graphd NodePort 10.105.47.116 9669:31646/TCP,19669:30554/TCP,19670:32386/TCP 22m

    # 使用 nebula-console 测试
    $ docker run --rm -ti --entrypoint=/bin/sh vesoft/nebula-console:v2-nightly
    # 通过 NodePort 连接到 graphd 组件
    / $ nebula-console -addr 192.168.0.4 -port 31646 -u root -p vesoft
    2021/02/19 05:04:55 [INFO] connection pool is initialized successfully

    Welcome to Nebula Graph v2.0.0-rc1!

    (root@nebula) [(none)]> show hosts;
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    | Host | Port | Status | Leader count | Leader distribution | Partition distribution |
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    | "nebula-storaged-0.nebula-storaged.default.svc.cluster.local" | 9779 | "ONLINE" | 0 | "No valid partition" | "No valid partition" |
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    | "nebula-storaged-1.nebula-storaged.default.svc.cluster.local" | 9779 | "ONLINE" | 0 | "No valid partition" | "No valid partition" |
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    | "nebula-storaged-2.nebula-storaged.default.svc.cluster.local" | 9779 | "ONLINE" | 0 | "No valid partition" | "No valid partition" |
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    | "Total" | | | 0 | | |
    +---------------------------------------------------------------+------+----------+--------------+----------------------+------------------------+
    Got 4 rows (time spent 2608/4258 us)

    FAQ

    如何搭建一套 Kubernetes 集群?

    搭建高可用的 Kubernetes 可以参考社区文档:https://kubernetes.io/docs/setup/production-environment/tools/kubeadm/high-a vailability/

    如何调整 nebula 集群的部署参数?

    在使用 helm install 时,使用 --set 可以设置部署参数,从而覆盖掉 helm chart 中 values.yaml 中的变量。参考文档:https://helm.sh/docs/intro/using_helm/

    能否兼容 nebula v1.0.0+ 集群部署?

    v1.0.0+ 不支持内部域名解析,需要修改 charts/nebula/values.yaml,配置如下:

    hostNetwork: true
    metadEndpoints: []
    - 192.168.0.2:9559
    - 192.168.0.3:9559
    - 192.168.0.4:9559

    如何在 K8s 集群外部访问 nebula 内部组件?

    本文使用 NodePort 的方式访问 graphd 组件,其他的访问方式还有 hostPort、hostNetwork、Ingress、LoadBalancer,需要您根据实际的部署环境来定制。

    如何查看 nebula 集群状况?

    使用kubectl get pods --namespace=default -l app.kubernetes.io=nebula命令,或者直接在 Kubernetes dashboard 上查看 nebula 集群的运行状况。

    如何使用其他类型的存储?

    参考文档:https://kubernetes.io/zh/docs/concepts/storage/storage-classes/

    推荐阅读

    • 分布式图数据库 Nebula Graph 的 Index 实践
    • 图数据库 Nebula Graph TTL 特性
    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    系统应用
    相关文章 更多
    悟空浏览器怎么彻底清理浏览器配置文件
    悟空浏览器怎么彻底清理浏览器配置文件

    彻底清理悟空浏览器的数据,通常有三个路径:通过手机系统设置能一次性清除所有配置和用户信息;利用浏览器内置功能,可以只清理缓存而保留个性化设置;最彻底的则是卸载重装,让应用回到初始状态。 悟空浏览器用久了,是不是偶尔会感觉变慢,或者出现一些难以解释的小毛病?有时候,与其一个个排查问题,不如来一次彻底的

    漫蛙漫画官网首页登录入口
    漫蛙漫画官网首页登录入口

    漫蛙漫画首页登录入口https://www.manwamh.top/:一触即达的漫画世界核心枢纽 对于漫画迷而言,找到那个可靠的资源门户至关重要。漫蛙漫画的首页登录入口,正是这样一个核心渠道。通过它,你可以直接跳转到漫蛙2漫画APP的下载页面,轻松几步完成安装,马上就能投入到精彩纷呈的漫画之旅中。 漫蛙漫画首页登录入口: 官方入口地址已经为你备好

    漫蛙漫画官方入口
    漫蛙漫画官方入口

    漫蛙漫画官方入口与核心功能解析 寻找一个稳定、资源丰富的漫画在线阅读平台,是许多漫画爱好者的共同需求。其中,漫蛙漫画官方入口及其免费全集服务,受到了不少关注。那么,这个平台究竟如何?下面,我们就来深入了解一下它的具体信息与特色功能。 平台的官方访问地址是:https://www.manwa123.c

    漫蛙动漫APP最新版本下载
    漫蛙动漫APP最新版本下载

    对于动漫爱好者而言,找到一个资源全、体验佳的追番平台,常常是件头疼事。漫蛙动漫APP的定位很明确:就是要打造一个聚合全球正版动漫资源的专属乐园。无论是当季火爆的日漫新番、值得回味的经典国创,还是那些小众却精彩的优质动画,在这里基本都能一网打尽。平台底层采用了智能缓冲技术,最大程度保证了播放的流畅度,

    漫蛙官网入口免费下载最新版
    漫蛙官网入口免费下载最新版

    想要获取正版manwa漫蛙APP?官方指定下载渠道就是漫蛙官网入口。 对于漫画迷而言,找到一款心仪的阅读神器至关重要。漫蛙APP正是这样一款专为全球漫画爱好者打造的平台,它汇聚了从日韩人气连载到本土原创精品的海量资源。说它“应有尽有”毫不为过。更重要的是,其界面设计清爽直观,搭配智能检索功能,能让用

    漫蛙漫画在线观看入口
    漫蛙漫画在线观看入口

    想要畅享海量正版漫画资源?漫蛙漫画平台不容错过 对于漫画迷来说,找到一个资源丰富、体验流畅的正版平台实属幸事。漫蛙漫画凭借其优质的在线阅读服务,已经成为了许多资深读者的心头好。今天,我们就来详细拆解一下平台的访问方法与实用技巧,助你轻松开启漫画之旅。 漫蛙漫画网页入口页面指南 想立刻体验?官方在线观

    漫蛙如何下载最新版本
    漫蛙如何下载最新版本

    漫蛙漫画网APP官方下载方法全解析 对于资深漫画迷来说,找到一个资源全、更新快、体验佳的阅读平台,就像淘到了宝藏。漫蛙漫画网APP,正是这样一个专为爱好者打造的精品集散地。它汇聚了全球优质的正版漫画,从火爆的日漫连载到崛起的国创佳作,平台都能做到实时同步更新。当然,第一步得先把它装到设备上。接下来,

    漫蛙漫画APP最新版本下载
    漫蛙漫画APP最新版本下载

    漫蛙漫画APP:专业漫画阅读工具的全面革新 作为一款专业的漫画阅读工具,漫蛙漫画APP整合了全球优质漫画资源,其升级版漫蛙2在功能与体验上可谓全面革新。这款应用不仅囊括日漫经典与国漫新作,更通过简洁直观的界面设计和流畅操作,为用户打造沉浸式阅读环境,充分满足各类漫画爱好者的多样化需求。 漫蛙漫画特色

    卖茶叶妈妈3d漫蛙安卓版下载
    卖茶叶妈妈3d漫蛙安卓版下载

    当下动漫圈热议的卖茶叶妈妈3d漫蛙下载,凭借其突破性的3D视觉技术成为焦点 最近动漫爱好者们都在讨论一个现象级产品——卖茶叶妈妈3d漫蛙下载。这款由漫蛙漫画平台倾力打造的3D作品专区,用立体建模与动态分镜彻底颠覆了传统二维漫画的阅读模式。你猜怎么着?现在只需通过专区提供的便捷下载通道,无论是热血冒险

    漫蛙下载最新版本
    漫蛙下载最新版本

    漫蛙APP:资深漫画迷的移动图书馆与阅读利器 对于漫画爱好者来说,找到一个资源全、体验好的阅读平台,从来都不是件容易的事。而漫蛙APP,恰恰就是为这个需求而生的。它凭借海量的正版漫画库和极其便捷的离线下载功能,在圈内积累了相当不错的口碑。更重要的是,从经典的日本热血漫到新兴的国产原创作品,它几乎一网

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。