StarRocks数据库部署全记录(保姆式帮助你初次体验StarRocks)

因业务需要，特此了解StarRocks产品和部署。
接触过程中发现指导资料很稀少，本人将结合官方的手册+其他开源博主指导，将第一次接触到的概念和部署流程梳理，得出本文。
已有的资源中对细节介绍欠缺，导致我本人整个过程中花费了大量时间去验证。这也是本文独特之处

了解星环数据库

• 1 什么是星环数据库？

StarRocks（星环数据库），一款国产开源的分析性数据库管理系统。专注于实时查询和分析大规模数据。

• 2 为什么使用StarRocks？

  若项目中已经使用了优化查询，库的分页分表，硬件升级，缓存，ES引擎这些方案提高查询效率后，发现查询效率仍不高，表明在处理此量级别的数据时，mysql性能受限。因此需要更换一款具有更强性能处理海量数据（PB级别及以上）的数据库

  若项目中需要及时获得最新的数据分析结果或需要快速查询大规模数据集，StarRocks具有出色的查询性能和可扩展性，其使用列式存储和分布式架构，可轻松处理大规模数据集，并提供更快的查询效率

  SatrtRocks处理海量结构化数据的存储，ES提供非结构化数据的全文搜索和分析能力，针对海量数据存储和数据搜索的需求，SatrRocks+ES是一套成熟的解决方案。

  总而言之，StarRocks是专门为分布式场景和处理大规模数据研发的，只是说其2022年开发版本进入2.0，且未实现全平台兼容。不如mysql稳定性强和庞大的社区规模。

• 3 使用前注意事项？

StarRocks对部署的硬件有一定的要求。不符合要求的环境会无法启动或者性能不佳。

x86环境

  StarRocks现仅支持拥有avx2指令集的x86架构的cpu；不支持avx2指令集的x86架构的cpu无法启动StarRocks。（但可以修改StarRocks源码启动，仅供学习使用，不推荐）


Arm环境
  arm环境不提供指令集SIMD指令集，因此需要手动编译二进制文件（无法发挥StarRocks全部性能）

总结来说：StarRocks仅支持部分X86环境

• 4 安装设备要求

必须 CentOS 7操作环境；（经测试，不支持其他测试环境：red hat）
必须 内存16G及以上； (经测试，不满足有概率无法添加FE节点)
磁盘空间200G及以上；
cpu 8核；（6核也行，推荐8核）

（不满足以上条件在部署时会极大概率会导致失败）

• 5 手动部署流程

本文将会在一台服务器上进行如下操作
  1） 安装mysql
  2） 安装+配置JDK
  3） 安装StarRocks
  4） 启动FE+添加节点
  5） 启动BE+添加节点

部署前准备

1）判断服务器环境是否支持部署，输入命令后有输出内容代表通过

cat /proc/cpuinfo | grep avx2

2）检查端口是否被占用

netstat -tunlp | grep 9060
netstat -tunlp | grep 8040
netstat -tunlp | grep 9050
netstat -tunlp | grep 8060
netstat -tunlp | grep 9050

StarRocks启动会默认占用此端口，若被占用，可以放开此端口（推荐）或在后面部署StarRocks中修改默认端口。

3）最佳的StarRocks部署方案

一台服务器只能部署一个FE节点
可以多台服务器部署多个FE节点搭建FE集群（节点会自动选主）

一台服务器部署一个BE节点
可以多台服务器部署多个BE节点搭建BE集群

每个服务器上部署一个Broker节点

4) 基本概念

FE节点
  负责查询规则，查询调度（连接数据库，解析执行sql）
BE节点
  负责存储数据
Broker节点
  负责数据的导入导出。（StarRocks—Broker—Hadoop）

部署

1.1部署单个FE节点

创建目录，分别上传对应的压缩包
/home
  --mouble
     --JDK
      – jdk-8u271-linux-x64.tar