Compute Group
Compute Group 是存算分离架构下,实现不同的负载之间物理隔离的一种机制,它的基本原理如下图所示:
- 一个或多个BE 可以组成一个Compute Group;
- BE 节点本地无状态,数据都是存储在共享存储上;
- 多个Compute Group 之间通过共享的存储的方式来访问数据。
在保持了Resource Group 强隔离的优点的同时,Compute Group与Resource Group 相比还有以下优势:
- 成本更低,由于采用了存算分离的架构,数据位于共享存储中,所以Compute Group的数量不再受限于副本的数量,用户可以根据需求创建任意多的Compute Group,存储成本不会变多;
- 更灵活,在存算分离架构下,BE 本地的数据都是缓存,所以增加Compute Group 时不需要做笨重的数据迁移过程,新的Compute Group 只需在查询时缓存预热即可;
- 隔离更彻底,数据的多副本存储由共享的存储层解决,所以任何Compute Group内的BE 宕机不会像Resource Group 那样导致导入失败。
3.0.2 之前的版本中叫做计算集群(Compute Cluster)。
查看所有Compute Group
可通过 SHOW COMPUTE GROUPS
查看当前仓库拥有的所有Compute Group。
SHOW COMPUTE GROUPS;
添加Compute Group
使用ADD BE 命令添加 BE 并为 BE 指定Compute Group,示例:
ALTER SYSTEM ADD BACKEND 'host:9050' PROPERTIES ("tag.compute_group_name" = "new_group");
上面命令会将host:9050
这台节点添加到new_group
这个Compute Group中,您也可以不指定Compute Group,默认会添加到default_compute_group
组里,示例:
ALTER SYSTEM ADD BACKEND 'host:9050';
授予Compute Group访问权限
GRANT USAGE_PRIV ON COMPUTE GROUP {compute_group_name} TO {user};
撤销Compute Group访问权限
REVOKE USAGE_PRIV ON COMPUTE GROUP {compute_group_name} FROM {user};
设置默认Compute Group
为当前用户设置默认Compute Group:
SET PROPERTY 'default_compute_group' = '{clusterName}';
为其他用户设置默认Compute Group(此操作需要 Admin 权限):
SET PROPERTY FOR {user} 'default_compute_group' = '{clusterName}';
查看当前用户默认Compute Group,返回结果中default_compute_group
的值即为默认Compute Group:
SHOW PROPERTY;
查看其他用户默认Compute Group,此操作需要当前用户具备相关权限,返回结果中default_compute_group
的值即为默认Compute Group:
SHOW PROPERTY FOR {user};
查看当前仓库下所有可用的Compute Group:
SHOW COMPUTE GROUPS;
-
若当前用户拥有 Admin 角色,例如:
CREATE USER jack IDENTIFIED BY '123456' DEFAULT ROLE "admin"
,则:-
可以为自身以及其他用户设置默认Compute Group;
-
可以查看自身以及其他用户的
PROPERTY
。
-
-
若当前用户无 Admin 角色,例如:
CREATE USER jack1 IDENTIFIED BY '123456'
,则:-
可以为自身设置默认Compute Group;
-
可以查看自身的
PROPERTY
; -
无法查看所有Compute Group,因该操作需要
GRANT ADMIN
权限。
-
-
若当前用户未配置默认Compute Group,现有系统在执行数据读写操作时将会触发错误。为解决这一问题,用户可通过执行
use @cluster
命令来指定当前 Context 所使用的Compute Group,或者使用SET PROPERTY
语句来设置默认Compute Group。 -
若当前用户已配置默认Compute Group,但随后该集群被删除,则在执行数据读写操作时同样会触发错误。用户可通过执行
use @cluster
命令来重新指定当前 Context 所使用的Compute Group,或者利用SET PROPERTY
语句来更新默认集群设置。
默认Compute Group的选择机制
当用户未明确设置默认Compute Group时,系统将自动为用户选择一个具有 Active BE 且用户具有使用权限的Compute Group。在特定会话中确定默认Compute Group后,默认Compute Group将在该会话期间保持不变,除非用户显式更改了默认设置。
在不同次的会话中,若发生以下情况,系统可能会自动更改用户的默认Compute Group:
- 用户失去了在上次会话中所选择默认Compute Group的使用权限
- 有Compute Group被添加或移除
- 上次所选择的默认Compute Group不再具有 Active BE
其中,情况一和情况二必定会导致系统自动选择的默认Compute Group更改,情况三可能会导致更改。
切换Compute Group
用户可在存算分离架构中指定使用的数据库和Compute Group。
语法
USE { [catalog_name.]database_name[@compute_group_name] | @compute_group_name }
若数据库或Compute Group名称包含是保留关键字,需用反引号将相应的名称 ``` 包围。
Compute Group扩缩容
通过 ALTER SYSTEM ADD BACKEND
以及 ALTER SYSTEM DECOMMISION BACKEND
添加或者删除 BE 实现Compute Group的扩缩容。
详细操作参考存算分离相关操作