1. 规划#

• 端口：FE 8030（Web）/ 9030（MySQL）；BE 9060（BE 通信）/ 9050（心跳）
• priority_networks 必须显式指定；FE 与 BE 时钟同步（ntp）；sysctl vm.max_map_count=262144 且 sysctl -w vm.swappiness=0

2. FE 部署#

1
wget https://releases.starrocks.io/starrocks/StarRocks-3.2.x-x86_64.tar.gz
2
tar -zxvf StarRocks-*.tar.gz -C /opt && ln -s /opt/StarRocks-* /opt/starrocks
3
mkdir -p /data/starrocks/meta && chown -R starrocks:starrocks /opt/starrocks /data/starrocks

1
meta_dir = /data/starrocks/meta
2
priority_networks = 10.0.0.0/24
3
JAVA_OPTS="-Xmx16g -Xms16g -Xmn4g"

1
# 第一台初始化
2
fe/bin/start_fe.sh --daemon
3
mysql -h127.0.0.1 -P9030 -uroot
4

5
# 后续 FE 加入
6
mysql> ALTER SYSTEM ADD FOLLOWER "node2:9010";
7
mysql> ALTER SYSTEM ADD FOLLOWER "node3:9010";
8
# 每台：start_fe.sh --helper node1:9010 --daemon

3. BE 部署#

1
storage_root_path = /data/starrocks/data1,medium:ssd;/data/starrocks/data2,medium:hdd
2
priority_networks = 10.0.0.0/24

1
be/bin/start_be.sh --daemon
2
mysql> ALTER SYSTEM ADD BACKEND "node1:9050";
3
mysql> ALTER SYSTEM ADD BACKEND "node2:9050";
4
mysql> ALTER SYSTEM ADD BACKEND "node3:9050";
5
mysql> SHOW BACKENDS;   -- 全部 Alive 即就绪

4. 建表验证（主键表 + 物化视图）#

1
CREATE TABLE orders (
2
  order_id  BIGINT,
3
  user_id   BIGINT,
4
  status    VARCHAR(16),
5
  amount    DECIMAL(20,2),
6
  modify_ts DATETIME
7
)
8
PRIMARY KEY (order_id)                          -- 主键表：实时更新
9
DISTRIBUTED BY HASH(order_id) BUCKETS 24;
10

11
-- 异步物化视图：多表聚合定时刷新
12
CREATE MATERIALIZED VIEW mv_user_daily
13
REFRESH ASYNC START('00:00') EVERY(INTERVAL 1 DAY)
14
AS SELECT user_id, DATE(create_time) d, SUM(amount) total
15
   FROM orders GROUP BY user_id, DATE(create_time);

5. 存算分离形态（Share-Data，可选）#

1
# 部署 CN（Compute Node）替代/并存 BE，数据在对象存储
2
# fe.conf 增加
3
enable_cloud_snapshot = true
4
# 创建存储卷（示例：S3 兼容存储）
5
CREATE STORAGE VOLUME s3vol TYPE S3
6
  LOCATIONS ("s3://bucket/prefix")
7
  PROPERTIES ("aws.s3.endpoint"="...", "aws.s3.access_key"="...", "aws.s3.secret_key"="...");
8

9
# 建表时指定 use_storage_volume
10
CREATE TABLE t (...) DISTRIBUTED BY HASH(k) BUCKETS 16
11
  PROPERTIES ("storage_volume"="s3vol");

WARNING

存算分离适合”弹性伸缩、多集群共享一份数据”的场景，但点查延迟依赖本地缓存命中率（热数据命中才快）。评估不了缓存命中率前，不建议把核心在线场景直接迁到 Share-Data。

1. 查询优化器#

• SET enable_cbo=true（默认开启）；关键表执行 ANALYZE TABLE xxx 收集统计信息，CBO 才有依据
• 大宽表关掉无关列的统计；Join 用小表驱动（SET join_implementation_mode="auto"）
• Pipeline：SET pipeline_dop=0（按机器核数自适应），高并发场景可显式设 4-8，避免线程数爆炸

2. 内存#

3. 主键表与实时更新#

• 主键表写入是”内存主键索引 + 写入时与旧数据合并”，高频小批次更新最合适（如 1 分钟级增量）
• 批量导入用 INSERT INTO ... VALUES 分批，或 Broker Load；更新量大时增大分桶数（主键索引内存占用也增大）
• 主键表不适用全表重写型大任务（如每天全量重灌），此时考虑明细表或异步物化视图

4. 物化视图#

• 同步 MV：只服务单表聚合，命中即透明改写，适合高频点查计数
• 异步 MV：刷新策略 REFRESH ASYNC START('00:00') EVERY(INTERVAL 1 DAY)，任务多时调大 mv_task_run_num（默认 4）
• 查询是否能命中 MV：EXPLAIN SELECT ... 看是否出现 MV_ 前缀节点

5. Colocate Join 与缓存#

• Colocate Join：多表同分桶键 + colocate_with="g1"，Join 时数据本地化，免 shuffle，高并发 Join 收益最大
• BE 块缓存 storage_page_cache_limit（默认 20% 内存）；热数据表可用 CREATE TABLE ... PROPERTIES ("enable_persistent_index"="true") 提升点查