快速入门

 

创建集群

更新时间 2023-09-06

本小节主要介绍如何通过管理控制台快速创建 QingMR 集群。

前提条件

  • 已获取管理控制台登录账号和密码,且账号已实名认证。

  • 已获取 QingMR 集群操作权限。

  • 在创建 QingMR 集群前,建议先创建好网络资源:

    先创建一个 VPC 网络,再创建一个受管私有网络并加入 VPC 中,并开启 DHCP 服务(默认开启)。

    说明

    为了保障数据安全,QingMR 集群需要运行在受管私有网络中。

操作步骤

  1. 登录管理控制台。

  2. 选择产品与服务 > 大数据服务 > 大数据引擎 QingMR,进入 QingMR 集群管理页面。

  3. 点击立即部署创建,进入应用部署页面。

  4. 选择区域
    根据就近原则,选择实例所在区域。

  5. 配置实例基本属性、应用版本、网络信息、环境参数等信息。

    a. 基本设置

    b. (可选)节点设置,包括 HDFS 主节点设置主节点设置从节点设置Client 节点设置

    c. 网络设置

    d. 依赖服务设置

    e. 服务环境参数设置

    f. 用户协议

  6. 确认配置和费用信息无误后,点击提交,创建集群。

    集群创建成功后,可在集群管理页面,查看和管理 QingMR 集群。

    集群列表

基本设置

集群名称、网络、版本、计费方式等基本信息配置。

参数 参数说明
UUID 系统默认分配的全局唯一标识码,不可修改。
名称 输入当前集群的名称。默认为QingMR
描述 (可选)对集群的简要描述。
版本 选择集群版本。
资源配置类型 选择集群节点云服务器规格。
  • 可选择基础型增强型
  • 选择自定义,需自定义集群各节点云服务器规格。
  • 计费方式 选择集群计费方式,可选择小时包年包月
    • 购买有效期:选择包年包月计费方式后,需选择可用时长。
    • (可选)自动续约:选择包年包月计费方式后,可开启自动续约。开启自动续约后,需选择续约时长,当您的账户余额充足时,集群到期后将按照选择的续约时长自动续费,保障业务连续性。
    可用区 选择使用区域。

    基本设置

    HDFS 主节点设置(可选)

    集群 HDFS 主节点的资源配置,包括云服务器规格、磁盘大小等。

    参数 参数说明
    CPU 选择集群节点云服务器 CPU 规格。
    内存 选择集群节点云服务器内存大小。
    节点类型 选择集群节点云服务器类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    节点容量 配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。

    HDFS 主节点设置

    主节点设置(可选)

    集群主节点的资源配置,包括云服务器规格、磁盘大小等。

    参数 参数说明
    CPU 选择集群节点云服务器 CPU 规格。
    内存 选择集群节点云服务器内存大小。
    节点类型 选择集群节点云服务器类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    数据盘类型 选择集群节点磁盘类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    节点容量 配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。

    主节点设置

    从节点设置(可选)

    集群从节点的资源配置,包括云服务器规格、磁盘大小等。

    参数 参数说明
    CPU 选择集群节点云服务器 CPU 规格。
    内存 选择集群节点云服务器内存大小。
    节点数量 选择集群节点数量个数。 默认3个从节点。
    节点类型 选择集群节点云服务器类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    数据盘类型 选择集群节点磁盘类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型企业级分布式 SAN (NeonSAN)
    节点容量 配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。

    从节点设置

    Client 节点设置(可选)

    Client 节点为用户可访问的节点,可以用它来访问 HDFS ,和集群交互如提交 job 等。

    集群客户端的资源配置,包括云服务器规格、磁盘大小等。建议选配 Client 节点,否则某些功能无法使用(除非手动下载相关软件包并配置好)。

    说明

    节点用户名为 ubuntu ,初始密码为 p12cHANgepwD。

    参数 参数说明
    CPU 选择集群节点云服务器 CPU 规格。
    内存 选择集群节点云服务器内存大小。
    节点数量 选择集群节点数量个数。 Client 节点为可选,如不需要可设置节点数量为0。
    节点类型 选择集群节点云服务器类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    数据盘类型 选择集群节点磁盘类型。
    • 2.5.2 版本默认为超高性能型,无需选择。
    • 1.3.0 版本可选择 性能型超高性能型
    节点容量 配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。

    客户端设置

    网络设置

    通过为集群设置独享私有网络,便于网络过滤控制,且不影响其它私有网络的设置,可确保数据库的对不同业务进行网络隔离。数据库集群仅可加入已连接路由器的私有网络,且需确保私有网络的 DHCP 处于打开状态。

    参数 参数说明
    VPC网络 选择 VPC 网络。
    • 默认适配同区域已有的 VPC 网络。可在下拉框选择已有 VPC 网络。
    • 若无可选 VPC 网络,可点击新建VPC网络,创建依赖网络资源。
    私有网络 选择私有网络。
    • 默认适配同区域已有的私有网络。可在下拉框选择已有私有网络。
    • 若无可选私有网络,可点击新建私有网络,创建依赖网络资源。
    节点 IP 配置节点 IP 地址。
    • 默认为自动分配
    • 选择手动配置需为各节点配置 IP。
    网络设置

    依赖服务设置

    选择依赖服务(External Service)后,可以将依赖服务所有节点加入 QingMR 所有节点的 hosts 文件中。 HBase、Hadoop 或者 Spark 集成的场景经常会有这种需求,选定依赖 HBase 集群即可自动添加 hosts ,无需手动添加。

    选择已创建的应用服务。

    依赖服务

    服务环境参数设置

    集群环境参数配置,可修改集群默认配置。或集群创建成功后,在集群详情页面配置参数页签修改参数。

    服务环境参数

    用户协议

    阅读云平台 AppCenter 用户协议,并勾选用户协议。

    用户协议

    这篇文档解决了您的问题吗?
    0
    0