SuperAPI AI 工具集

starrocks-cluster-setup

通用与其它

查看项目

更新于 10-16 06:15

技能介绍

用途:该技能用于部署和管理 StarRocks 集群拓扑,包括 Frontend(FE)、Backend(BE)和可选 Broker 角色,节点配置以及节点生命周期操作。适用时机:部署新集群或规划拓扑;配置 fe.conf / be.conf;添加、移除或下线 BE 节点;为高可用和读扩展添加 FE follower/observer;检查集群状态。相关技能包括 starrocks-resource-management(会话限制、资源组、存储卷)和 starrocks-monitoring(持续健康检查与维护)。

架构:FE 负责查询规划与调度、元数据管理、客户端连接处理,建议 3 个以上节点以实现高可用。BE 负责数据存储与处理、查询执行,建议至少 3 个节点。Broker 可选,用于从外部存储(S3、HDFS)加载数据,轻量,可与 FE 节点共用。

配置:fe.conf 包含 meta_dir、http_port=8030、rpc_port=9020、query_port=9030、enable_auth_check=true、qe_max_connection=4096 等。be.conf 包含 storage_root_path(可配置多个以提升 I/O)、heartbeat_service_port=9050、be_port=9060、be_http_port=8040、scanner_thread_pool_thread_num=48、pipeline_exec_thread_pool_thread_num=0(0 表示自动)等。

管理命令:添加 BE 使用 ALTER SYSTEM ADD BACKEND "host:port"; 移除 BE(数据会被迁移)使用 ALTER SYSTEM DECOMMISSION BACKEND "host:port"; 添加 FE 使用 ALTER SYSTEM ADD FOLLOWER "host:edit_log_port"; 或 ALTER SYSTEM ADD OBSERVER "host:edit_log_port"; 查看集群状态使用 SHOW PROC '/backends'; 和 SHOW PROC '/frontends'; 查看集群负载使用 SHOW PROC '/statistic';。

限制:资料未提供安装步骤、版本要求、操作系统依赖、端口安全配置、故障恢复细节及具体性能指标,暂未提供。