02-TBDS-4.0.5.0-腾讯大数据套件-平台管理

用户组
• 主要是划分用户的组归属，进一步做组织管理和权限细分，例如同部门的运维人员可归于同一用户组； • 用户与用户组是多对多的关系。
密钥
• 用于识别用户身份的一种凭证，包含id和key，后续开发课程会详细介绍
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
1.2概述-概念
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.1项目管理
创建项目-配置存储资源
3 存储资源池的HDFS目录默认为 /project/<projectID>/
4 调整项目在HDFS中 最大可用存储空间
5 完成所有配置 后创建项目
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.3项目资源
查看项目-资源信息-调整资源配额
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
CONTENTS
章 节ቤተ መጻሕፍቲ ባይዱ
第三章 资源管理
第 一
3.1 状态
章
云 计
3.2 配置
算
发第
展一
历章
史云
计
算
发
版权归© 2019 Ten展cent, Inc.或其附属公司所有 保留所有权利
5.2公告管理
公告管理
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
5.3通知渠道
邮件
短信
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
5.3产品信息
产品信息
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
用户角色
• 用户在项目中的角色包括：开发者、运维者、项目经理，另外用户的系统角色包括：系统管理员； • 角色的目的和意义在于控制用户对系统进行不同操作的权限。
1 该项目包含的成员 2 各成员的角色
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
CONTENTS
章 节
第二章 项目管理
4.1用户/用户组/角色
用户角色
系统角色： • 系统管理员：拥有对整个集群资源、项目以及用户进行
操作和分配的权限，可以监控集群资源使用情况，监控 集群运行的作业，集群计量信息，运维操作等
项目角色： • 项目经理：负责统筹项目如对应用的运行审批； • 开发者：负责对应用进行开发； • 运维者：负责对项目的资源配置、使用监控等。
6 项目内所有用户和应用程序存储数据 的HDFS目录及其可用空间
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
1.2概述-概念
资源池
• yarn分配指定资源队列，提供计算任务时需要的资源
用户
• 大数据平台的使用用户，隶属于项目，拥有开发、运维、管理员等数种项目成员权限身份； • 用户与项目是多对多的关系。
谢谢
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2 点击创建项目
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.1项目管理
创建项目-项目信息
1 定义项目名称、标识、管理员
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.1项目管理
创建项目-新建资源池
2 定义计算资源池相关信息，包括资 源池名称、权重、可使用VCores/ 内存的最大最小值、程序并发度、 AM最大份额等
CONTENTS
目 录
第一章 概述 第二章 项目管理 第三章 资源管理 第四章 用户管理 第五章 系统设置
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
CONTENTS
章 节
第一章 概述
第 一
1.1 入口
章
云 计
1.2 概念
算
发
展
历
史
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
CONTENTS
章 节
第五章 系统设置
第 一
5.1 系统信息
章
云 计
5.2 公告管理
算
发第 展一
5.3
通知渠道
历章
史云 5.4 产品信息
计
算
发
版权归© 2019 Ten展cent, Inc.或其附属公司所有 保留所有权利
5.1系统信息
系统信息
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
1.1概述-入口
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
1.2概述-概念
项目
• 大数据平台基于项目进行业务系统上线和管理 • 项目包含：项目成员、资源队列（最小最大CPU资源、最小最大内存资源、HDFS目录、HDFS存储空
间）、项目优先级、项目内运行的最大程序数量等
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.1用户/用户组/角色
添加用户
用户基本信息
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.1用户/用户组/角色
用户关联角色
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.2密钥
新建密钥
密钥新建完后默认不开启，需要手动开启后密钥才有效
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.3组织信息/架构
组织信息
组织架构
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
CONTENTS
章 节
第四章 用户管理
第 一
4.1 用户/用户组/角色
章
云 计
4.2 密钥
算
发第 展一
4.3
组织信息/架构
历章
史云
计
算
发
版权归© 2019 Ten展cent, Inc.或其附属公司所有 保留所有权利
4.1用户/用户组/角色
用户总览
用户组总览
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
资源
• 资源管理包含项目在GAIA服务中所对应的资源队列的一系列信息
1 项目对应的GAIA资源池名 2 项目对应的优先级权重 3 运行在项目内的所有应用程序能够使
用的CPU和内存的限 4 项目内能够同时运行的程序最大并发量 5 限制可用于运行 Application Master 的小部分资源池的公平份额。
4.1用户/用户组/角色
用户关联用户组
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.1用户/用户组/角色
新建用户组
用户组信息
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
4.2密钥
用户密钥管理
密钥主要用于用户的身份认证，例如应用程序需要提交相应模块的用户密钥证明自己的身份才能 访问相应的资源，后续会详细介绍。
3.1资源管理-状态
状态
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
3.1资源管理-配置
配额
• 计算资源池：主要是Yarn队列相关的指标，如CPU/内存/队列优先度（权重）/最大应用数等； • 存储资源池：主要是HDFS目录相关的指标，如目录名/可存储大小等。
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.2项目成员
查看项目-项目成员
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.3项目资源
查看项目-资源信息-基本信息
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.3项目资源
查看项目-资源信息-资源详情
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
第 一
2.1 项目管理
章
云 计
2.2 项目成员
算
发第 展一
2.3
项目资源
历章
史云
计
算
发
版权归© 2019 Ten展cent, Inc.或其附属公司所有 保留所有权利
2.1项目管理
项目总览
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
2.1项目管理
创建项目
1 点击平台管理
TBDS-4.0.5.0-平台管理
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
课程目标
通过本课程的学习，您将可以
了解TBDS门户页面平台管理模块的功能 掌握TBDS门户页面平台管理模块的使用
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
项目管理
• 所有应用系统上线，提交到大数据集群的程序都必须运行在分配好的项目之内 • 项目包含唯一资源队列，包括分配的最小和最大限制的CPU、内存、存储空间等 • 不同资源队列之间分配优先级，适应不同的业务系统
版权归© 2019 Tencent, Inc.或其附属公司所有 保留所有权利
1.2概述-概念