资源管理

当我们开通了项目空间之后,针对不同的分支项目可以设置对应的新集群。【资源管理】支持对不同集群中的队列注册、集群想起查看、申请开通测试功能等操作。需要注意的是:申请新的队列或注册Hive库都需要平台管理员审批通过。

资源管理 - 图1 WechatIMG94.png

1-当前项目还有剩余集群资源时,可申请开通新集群 2-集群列表/资源监控切换 3-支持注册Yarn/Impala队列,注册Hive库,申请开通测试功能等操作

1 申请开通新集群

资源管理 - 图3 WechatIMG101.png

1-选择新建的集群 2-填写存储配额 3-填写默认Hive表名 4-填写默认队列名称 5-选择新集群资源配置方案 6-选择新集群弹性策略

2 查看集群详情

2.1 队列详情

资源管理 - 图5 WechatIMG95.png

1-集群队列详情、Hive库详情、存储配额详情 2-支持Yarn/Impala队列切换 3-支持默认/测试Yarn队列条件切换 4-支持对队列配置修改

2.2 Hive库详情

资源管理 - 图7 WechatIMG96.png

1-支持对集群的Hive库新建

2.3 存储配额详情

资源管理 - 图9 WechatIMG98.png

1-支持修改集群的存储配额

3 注册Yarn/Impala队列

3.1 注册Yarn队列

资源管理 - 图11 WechatIMG99.png 1-填写队列名称 2-选择新队列资源配置方案 3-配置对应的弹性策略 4-若开通了测试功能,可选择资源配置策略

3.2 注册Impala队列

资源管理 - 图13 WechatIMG100.png 1-填写新注册队列名称 2-选择队列资源配置方案

4 注册Hive库

在集群条目或者Hive库详情页可进入注册Hive库页面

资源管理 - 图15 WechatIMG97.png

2-新建Hive库支持离线库和测试库类别 3-填写新建Hive库名

5 申请开通测试功能

资源管理 - 图17 WechatIMG102.png

若未开通测试功能的集群,可点击按钮进行开通,但若已经开通了测试功能或者已提交了测试功能申请还未审批通过的、或者已提交了测试功能申请已被拒绝的,则按钮置灰,不可申请测试功能开通。

在”申请开通测试功能”的工单中,选择想要开通测试功能的Hive库,测试Hive库名 自动为hive库名_dev命名。 申请提交之后,工单进入审批流程,审批通过之后,即开通测试功能。

6 资源监控

资源监控主要分成日CPU使用情况、日内存使用情况、日存储使用情况。因为界面功能一致,这里只介绍日CPU使用情况。

资源管理 - 图19 WechatIMG103.png

1-支持对集群队列进行筛选 2-支持设置时序对比,可选择系统配置好的时段或者自定义时段 3-监控情况支持显示数据、到处Excel、导出图片操作