Transwarp Data Hub是星环科技自主研发的企业级一站式多模型数据管理平台,自诞生以来,TDH采用业内领先的计算引擎与创新的系统架构,持续为企业用户智能化管理以及开发数据赋能,帮助数千家企业实现了对海量数据的统一管理与集群服务的统一运维。
近期,星环科技发布了TDH8.1.0版本。全新升级的TDH管理平台进行了页面布局的重构,支持不停服、不中断业务的集群升级方案,并且支持更稳定、更高效的超大集群一站式管理,极大程度的提升了用户数据开发管理的使用体验。
全新重构的页面布局让组件部署与管理更便捷、更高效
为了简化多模型机构的使用和运维,TDH 8.1.0 创建了一个新的统一界面,通过引入集群-产品-服务这3层布局的方式,更深入的体现出多模型数据库的业务价值。为了方便用户查看并更高效的进行组件部署,TDH8.1.0在较大集群中把同类型产品聚合展示,并图形化展示多个组件之间的依赖关系,对集群运维人员更加友好。
不停服、不中断业务的集群升级方案支持,整体升级更加流畅稳定
相比以往平台升级期间需要关闭所有服务的要求,TDH 8.1.0 采用全新的系统架构,基于TCOS容器化集群操作系统,强化了用户在不停服、不中断业务的情况下完成平台的升级操作。整个升级过程时间更短、影响更小,操作更简单。
并且,平台中的所有分布式集群均实现了数据与服务的高可用,确保平台健康稳定运行。TDH8.1.0 利用分布式系统的特点,能够在不中断业务的基础上平滑地完成系统服务升级以及实现集群的动态扩容和缩容,即弹性扩展等操作。
除此之外,TDH 8.1.0还提供平台补丁功能,相对于整体升级,做到了更轻量级、对业务无感知的在线维护。其提供平台及产品升级维护统一操作入口,全流程一键完成。同时,完整记录平台版本维护操作记录方便事后审计回溯,更加安全可控。
全新自研的云原生操作系统支持更稳定、更高效的超大集群管理
TDH 8.1.0持续为上层大数据业务容器化运行以及应用云端化提供关键保障。作为一站式多模型大数据管理平台,其采用全新自研的TCOS 2.1系统,支持灵活、按需的进行水平扩展,支持异构硬件(X86,ARM混合部署)、异构操作系统的水平扩展,支持单独扩展计算或存储资源的水平扩展。通过提供集群化部署管理功能,可以方便地安装部署并管理规模高达数千节点的单个/多个大数据集群。
TDH8.1.0延续采用强大的存算解耦架构,结合多模型数据库概念,使得业务的横向扩展、纵向延伸更具备灵活性。
那今天这篇文章将手把手带领大家 “三步”完成TDH8.1.0的安装,通过安装过程的体验让大家更全面的了解星环科技TDH8.1.0带来的更易用、运维更便捷以及升级更平滑等特性。
在正式安装前,我们需要按照星环科技《Transwarp Data Hub Version 8.1.0安装手册》的环境要求准备好环境,并按照安装前的检查条目进行仔细校验,检查完成无误后我们就可以在管理节点上安装Transwarp Manager了。
01
Step1 一键Manager安装
Transwarp Manager是负责配置、管理和运维服务集群的图形化工具。用户只需通过几个手动步骤,就可以在x86、ARM、MIPS等各架构服务器或基于Docker的云端平台上一键式集群部署,并且提供告警、 健康检测、 监控和度量等全方位的运维服务。用户可以实时浏览各服务的状态,并且在告警出现时采取恰当的措施以处理应对。此外, Manager还提供了一些便捷的运维功能,例如磁盘管理、软件升级和服务迁移等。
Transwarp Manager支持图形化界面安装,根据引导式向导,用户只需进行简单的设置即可实现一键安装。
首先需要先解压安装包,然后通过浏览器访问管理节点,进入Web Installer进行图形化界面安装。
安装Manager主要分为如上图6个步骤,只需要按向导目录依次进行就可以了,其中需要配置的是第3步配置Manager和第5步配置RPM库。
●配置Manager主要是配置网卡和端口用于Transwarp Manager和集群中其他节点通信,推荐默认端口 “8180”。
●配置RPM库主要是安装Transwarp Manager需要一个包含对应版本操作系统的资源库(repo),RPM库提供Manager安装所需资源。如果您的操作系统为CentOS或者Red Hat,您会看到如下提示(SUSE系统的操作完全相同,区别在于如果您使用的是SUSE系统,示例步骤中显示 “yum” 的地方将会在您的操作中显示 “zypper):
Transwarp Manager安装提供四种配置方式,例如,如果您选择 “使用远程RPM库”,您需要输入已经创建好的资源库的URL。如果您选择 “创建新的RPM库(DVD)”,您需要准备好对应版本操作系统的光盘。
配置好RPM库后,点击 “应用配置”,安装程序会清理资源库缓存,并会自动开始安装和配置Transwarp Manager,实现一键安装。
至此,Transwarp Manager的安装就完成啦。
之后,我们可以访问提示的安装地址,登录管理界面继续接下来的配置。
02
Step2 自动化集群配置
通过TDH提供的自动化集群配置功能,用户可以自动化实现规模高达数千节点的单个或多个大数据集群的配置。
打开客户端浏览器,输入安装好的管理节点IP或DNS地址,您会看到下面的登录页面:
在确认接受最终用户协议后即可以对集群进行配置。首先用户需要先对集群进行命名以添加集群。
添加集群之后即进入第二阶段添加节点,添加节点环节包含5个小步骤。
①全局设定
全局设定包括DNS配置和NTP配置。
如果配置集群中的节点可以通过主机名互相访问,用户必须配置有效的DNS服务器或/etc/hosts文件。否则请选择需要管理工具配置/etc/hosts,Transwarp Manager会相应为您配置/etc/hosts文件,然后添加节点。
使用NTP服务器可以确保集群中节点时钟同步,用户可以指定外部的NTP服务器或者依赖Transwarp Manager自动选择一台节点作为内部NTP服务器。
②编辑机柜
用户可以对机柜的名字和描述进行编辑,节点数会随着您之后的配置自动改变。
③编辑仓库配置
若集群内其他节点与管理节点的操作系统版本相同,则直接使用初始配置,无需添加RPM库配置;若集群内其他节点与管理节点的操作系统版本不同,需要添加对应的RPM库。
④节点分配
用户可以为集群分配节点,点击“添加节点”,在弹出窗口中按照提示输入符合格式的节点IP,此处支持范围搜索:如“172.18.130.[1-50]”,然后在查询结果中勾选想要添加的节点。
点击“下一步”,将出现进行SSH访问权限配置的界面,在该节点上您可以选择访问节点使用身份,并且提供了两种认证方法,所有节点使用同一密码或者使用同一密钥。以所有节点使用同一密码为例,用户需要在对应的输入框中输入管理节点的密码、确认密码、输入ssh端口号。
上述配置完成后,点击“确定”,节点便添加完成。如果只有一个机柜,Transwarp Manager会自动将所有节点分配给默认机柜。如果用户有多个机柜,用户可以通过点击“分配机柜”来指明节点和机柜之间的分配关系。如果集群中有6个以上的节点,那么必须配置机柜信息,方便以后的运维和服务配置。
同时,用户可以在这里为节点分配RPM库,默认使用初始配置。
⑤安装节点
上述设置均完成后,系统会自动化添加节点并进行自动化配置。
集群配置成功后您会看到成功页面,点击“下一步”,用户就可以开始向集群安装服务了。
03
Step3 一键服务安装
在Transwarp Manager安装和集群配置完成后,接下来用户就可以使用Transwarp Manager向集群安装TDH的服务。用户只需要在Transwarp Manager的应用市场里先上传产品包,而后Transwarp Manager会自动完成解压,使得安装服务更加便捷和灵活。
那服务的安装也非常简单方便,用户只需在服务安装的图形化界面进行简单的配置,包括选择服务、分配角色、配置安全、配置服务,在服务总览中确认配置后就可以实现一键服务安装。
下面以安装Transwarp Basic为例安装TxSQL和ZooKeeper服务,其他产品和服务与该过程相似,可参考该安装过程进行相应安装。
当产品包上传成功后,相应的服务将会出现在安装服务时的选择服务页面。如果您上传了多个版本的产品包,您可以在这里选择要安装的版本。之后我们可以分配各项服务的角色,各服务角色都对应若干个勾选框,每个勾选框代表集群中的一个节点,被选中的节点将承担该服务角色。
安全配置支持简单认证模式和Kerberos认证模式。若选择开启Kerberos认证模式,需要先安装Guardian,然后输入Kadmin票据名、Kadmin密码。
服务的配置非常重要,请您务必在这一步仔细检查每一项服务的配置。在“配置服务”下,您可以为所有的服务进行配置,通过直接点击属性和参数的值对它们进行修改。如果没有特殊要求,您可以直接使用Transwarp Manager对基础参数提供的默认值。当然,基础参数值不仅在这一步可以设置,安装完成后还可以在服务配置页面进行修改。
配置好参数后,我们就可以看到配置信息总览并需要对配置的服务进行确认。
确认配置信息后,点击 “下一步”,安装程序会自动开始安装和配置服务,实现一键服务安装。
安装完成后,我们可以在 Transwarp Manager 仪表盘的集群中看到安装好的服务了。TDH8.1.0产品界面引入了集群-产品-服务这3层布局的方式,完全打通所有服务的监控数据,使用统一的工具监控,对碎片化的运维数据进行收集整理,实现了对各种指标和系统运行情况进行全面监控,更深入的体现出多模型数据库的业务价值,使得维护管理更加便捷。
同时,为了方便用户查看并更高效的进行组件部署,TDH8.1.0通过图形化展示了多个组件之间的依赖关系,使得服务部署更加简单,方便和高效。
至此,Transwarp Data Hub 8.1.0以及相关服务就安装完成啦。整个安装过程均在图形化界面上进行操作,逻辑清晰,操作简单,只需按照引导进行配置就可以轻松完成TDH8.1.0的安装,带给用户极佳的安装体验。
与安装相对应的,在平台及产品升级方面,TDH 8.1.0 采用了全新的系统架构,强化了用户在不停服、不中断业务的情况下完成平台的平滑升级。整个升级过程时间更短、影响更小,操作更简单,全流程一键完成。除此之外,TDH 8.1.0还提供平台补丁功能,相对于整体升级,做到了更轻量、对业务无感知的在线维护。
以上便是星环科技TDH8.1.0安装的相关介绍。
【【产品实操】手把手教你安装 TDH8.1.0】星环科技作为一家大数据技术领域的企业级基础软件开发商,将继续利用自身的平台优势和多年的行业经验,不断优化用户体验,让用户更全面、更便捷、更智能、更安全的运用数据。
推荐阅读
- R语言从入门到机器学习|R语言rename重命名dataframe的列名实战:rename重命名dataframe的列名(写错的列名不会被重命名)
- Pyecharts|Pyecharts 猎聘招聘数据可视化
- Python|Python--随机森林模型
- 数据挖掘|【数据挖掘】二手车交易价格预测(五)建模调参
- python|深度盘点(一文详解数据分析中100个常用指标和术语)
- python|【python】微信朋友圈数据分析及可视化(爬虫+数据挖掘)
- python|requests库请求获取不到数据怎么办(不妨试试看这种妙法)
- 还不了解数据库(Smartbi一文带你入门数据库!)
- 还不会做销售分析(掌握这3个思路,让你秒变分析高手)
- 手把手教你实现地图可视化分析