当开通了项目空间之后,针对不同的分支项目可以设置对应的新集群。资源管理支持对不同集群中的队列注册、集群详情查看、申请开通测试功能等操作。
资源管理 - 图1

如果当前项目还有剩余集群资源时,则可申请开通新集群。支持Yarn队列、Impala队列、注册Hive库的注册。

注意: 申请新的队列或注册Hive库都需要平台管理员审批通过。

申请开通新集群


点击申请开通新集群,进入新集群配置页面,需要完成集群的选择、存储配额、Hive库名、默认队列以及资源方案的配置。
资源管理 - 图2

查看详情


点击查看详情可进行集群资源的查看,主要包括集群队列、Hive库、存储配额。

队列

支持对Yarn队列和Impala队列参数进行查看,包括CPU配额、内存配额、最大并行任务数等。
资源管理 - 图3

Hive库

支持查看Hive库路径、注册新的Hive库。
资源管理 - 图4

存储配额

展示当前存储配额信息,支持修改存储配额。
资源管理 - 图5

注册Yarn/Impala队列


资源管理页面点击注册Yarn队列按钮或者注册Impala队列按钮可以进行相关配置。

注册Yarn队列

注册Yarn队列需要填写队列名称、选择队列资源的配置方案以及配置弹性队列。如果当前开通了测试功能,还需要配置测试队列相关参数。
资源管理 - 图6

注册Impala队列

注册Impala队列需要填写队列名称、选择队列资源的配置方式以及请求参数等。
资源管理 - 图7

注册Hive库


资源配置页面点击注册Hive库按钮进入配置页面,进行Hive库的创建。如果当前开启数据测试功能,Hive库类别中支持离线库和测试库。
资源管理 - 图8

申请开通测试功能


如果未开通测试功能的集群,可点击按钮进行开通。当已经开通了测试功能,或者已提交了测试功能申请还未审批通过的,又或者已提交了测试功能申请已被拒绝的,则按钮置灰,不可申请测试功能开通。

申请开通测试功能的工单中,选择想要开通测试功能的Hive库,测试Hive库名将自动以Hive库名_dev进行命名。申请提交之后,工单进入审批流程,审批通过后,即开通测试功能。
资源管理 - 图9

资源监控


资源管理页面中点击资源监控页签可查看资源使用情况。当前资源监控主要分为日CPU使用情况、日内存使用情况、日存储使用情况。因为界面功能一致,这里只介绍日CPU使用情况。
资源管理 - 图10

此外支持数据比对、导出Excel、导出图片功能。