第1.3章:StarRocks部署--单机部署

StarRocks本地部署 StarRocks 是一款高性能分析型数据仓库,使用向量化、MPP 架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。StarRocks 既支持从各类实时和离线的数据源高效导入数据,也支持直接分析数据湖上各种格式的数据。StarRocks 兼容 MySQL 协议,可使用 MySQL 客户端和常用 BI 工具对接。同时 StarRocks 具备水平扩展,高可用、高可靠、易运维等特性。广泛应用于实时数仓、OLAP 报表、数据湖分析等场景。上面这段是直接引用官方的原话。 阅读详情

严格来说,StarRocks并没有所谓的“Standalone运行模式”,生产环境下更是不建议进行单实例部署。这里将单机部署整理出来,主要是考虑当用户测试环境受限于机器数量或仅希望验证功能,那么也可以在一台机器上简易部署把StarRocks跑起来。

以服务器“starrocks(192.168.110.98)”为例,在进行完“第1.2章:StarRocks部署--部署环境准备”中的准备工作后,我们开始进行单节点的部署。

为方便演示,我们使用root用户通过XShell工具访问服务器,单节点架构设计如下:

机器节点

192.168.116.98 (starrocks)

部署服务

1 FE(Leader)

1 BE

1 Broker

mysql-client

部署目录及数据目录设计如下,后续的部署操作严格按照部署设计进行:

 

1 获取二进制产品包

StarRocks的二进制部署包可在官网下载获取:

StarRocks - 新一代极速全场景MPP数据库正在上传…重新上传取消https://www.starrocks.com/zh-CN/download/community

下面我们以StarRocks-1.19.2.tar.gz为例,将下载好的部署包上传至/opt/software目录下:

[root@starrocks ~]# mkdir /opt/software

[root@starrocks ~]# cd /opt/software/

[root@starrocks software]# ll

total 988752

-rw-r--r-- 1 root root 1012479814 Nov 22 15:46 StarRocks-1.19.2.tar.gz

2 解压产品包

[root@starrocks software]# tar xvf StarRocks-1.19.2.tar.gz

[root@starrocks software]# ll

total 988752

drwxrwxr-x 6 1007 1007        100 Nov 20 20:29 StarRocks-1.19.2

-rw-r--r-- 1 root root 1012479814 Nov 22 15:46 StarRocks-1.19.2.tar.gz

StarRocks二进制包解压后目录结构及简要说明见附录一:StarRocks部署包目录树。

3 分发部署文件

[root@starrocks software]# mv /opt/software/StarRocks-1.19.2 /opt/software/starrocks[重命名]

[root@starrocks software]# mv /opt/software/starrocks /opt/module/

[root@starrocks software]# cd /opt/module/starrocks/

[root@starrocks starrocks]# ll

total 0

drwxr-xr-x. 5 1021 1021 40 Nov 22 14:40 apache_hdfs_broker

drwxr-xr-x. 6 1021 1021 51 Nov 22 14:40 be

drwxr-xr-x. 8 1021 1021 83 Nov 22 14:52 fe

drwxr-xr-x. 4 1021 1021 32 Nov 22 14:40 udf

4 部署FE实例

4.1 修改FE配置文件

StarRocks各服务配置文件的默认配置已经足以启动集群,不建议初尝用户修改较多配置。FE的配置文件在测试环境中我们通常只需要关注以下三点:

a、注意默认端口,避免端口冲突,正常情况下不需要修改;

b、绑定IP,避免多网卡情况下服务无法自动匹配到正确的IP。特别注意,绑定ip时,如果不清楚CIDR表示法,可以直接填写完整的ip(不支持别名),例如配置为priority_networks = 192.168.110.98,这样的写法等同于priority_networks = 192.168.110.98/32;

c、设置元数据目录,默认目录为fe/meta,我们建议新建目录并修改配置文件。

根据部署设计,创建元数据存储目录:

[root@starrocks starrocks]# mkdir /opt/meta

针对b和c修改配置文件(带#的为注释,红色字体为新增配置):

[root@starrocks starrocks]# vi /opt/module/starrocks/fe/conf/fe.conf

# store metadata, create it if it is not exist.

# Default value is ${STARROCKS_HOME}/meta

# meta_dir = ${STARROCKS_HOME}/meta

meta_dir = /opt/meta

…………

# Choose one if there are more than one ip except loopback address.

# Note that there should at most one ip match this list.

# If no ip match this rule, will choose one randomly.

# use CIDR format, e.g. 10.10.10.0/24

# Default value is empty.

# priority_networks = 10.10.10.0/

StarRocks:存算一体模式部署 StarRocks 是一款高性能分析型数据仓库,使用向量化、MPP 架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。StarRocks 既支持从各类实时和离线的数据源高效导入数据,也支持直接分析数据湖上各种格式的数据。StarRocks 兼容 MySQL 协议,支持标准 SQL,用户可以轻松地通过 MySQL 客户端连接到 StarRocks 实时查询分析数据。同时 StarRocks 具备水平扩展,高可用、高可靠、易运维等特性。 阅读详情

相关推荐

StarRocks部署方案详解:从单机到分布式集群

本文将系统介绍StarRocks的多种部署方案,涵盖**单机部署**、**集群部署**、**容器化部署**及**云平台部署**,并提供配置优化建议。| 分布式集群部署 | 生产环境、高并发与海量数据 | 高可用、线性扩展、负载均衡 | 多节点,SSD存储 |- **FE节点**:至少3个(1 Leader + 2 Follower),实现元数据高可用。- **BE节点**:至少3个,数据分片多副本存储(推荐3副本)。- **负载均衡**:可选HAProxy或F5实现查询请求分发。

weixin_47233946的博客 1907

基于Docker Compose编排StarRocks集群:从单机到高可用部署实战

本文详细介绍了如何使用Docker Compose编排StarRocks集群,从单机快速部署到生产级高可用架构的实战指南。通过容器化技术,开发者可以轻松实现环境一致性、快速扩容和资源隔离,显著提升StarRocks这一MPP数据库的部署效率和运维体验。文章包含完整的配置模板、关键参数解析和常见问题解决方案。

weixin_29248611的博客 153

别再手动编译了!用Docker 5分钟搞定StarRocks 3.3.2单机版部署(附华为云镜像加速)

本文详细介绍了如何使用Docker在5分钟内快速部署StarRocks 3.3.2单机版,并利用华为云镜像加速提升下载速度。通过对比传统部署方式,展示了Docker在环境一致性、资源隔离和快速回滚方面的优势,提供了从镜像拉取到服务验证的完整实战指南,适合开发者和数据分析师快速搭建测试环境。

weixin_30357231的博客 525

从零搭建实时湖仓:Flink、Paimon、Hadoop与StarRocks(Doris)单机部署实战

本文详细介绍了在Mac上从零搭建实时湖仓技术栈的完整流程,涵盖Flink、Paimon、Hadoop与StarRocks(Doris)的单机部署实战。通过环境准备、组件配置、集成联调等步骤,帮助开发者快速构建实时数据处理管道,并提供了常见问题的解决方案和性能优化技巧。

weixin_42567046的博客 118

Nestjs框架: 集成 Prisma

NestJS官方文档提供了两种数据库相关的内容:Techniques下的数据库板块和Recipes下的具体数据库集成方案。本文以Prisma为例,演示了如何集成Prisma到NestJS项目中。首先创建NestJS项目并安装Prisma,配置MySQL数据库连接。通过Prisma CLI初始化项目、定义数据模型并生成迁移文件。接着创建Prisma模块和服务,配置Prisma客户端连接数据库。最后在控制器中注入PrismaService实现数据查询。整个过程包含了Docker启动MySQL、Prisma模型定

Wang的专栏 1300

手把手教你搞定爱思唯尔LaTeX投稿:从模板到PDF生成的全流程避坑指南

本文详细介绍了使用LaTeX投稿爱思唯尔期刊的全流程避坑指南,包括模板选择、文件结构规范、投稿系统文件上传策略、PDF生成与检查等关键步骤。特别强调了避免常见错误如宏包冲突、图片丢失和参考文献问题,并提供了投稿后的应急方案和高阶自动化校验脚本,帮助研究者顺利完成投稿。

weixin_42525289的博客 515

SAP-FICO LSMW实战:批量导入财务凭证与固定资产主数据(AS91)的完整指南

本文详细介绍了SAP-FICO中LSMW工具在批量导入财务凭证与固定资产主数据(AS91)的完整流程与实战技巧。从基础概念、环境准备到财务凭证导入全流程,特别针对AS91历史资产导入的日期逻辑和关键字段映射提供了专项指南,并分享了常见错误排查与性能优化建议,帮助用户高效完成SAP数据迁移任务。

weixin_29230649的博客 508

提升仿真效率:Synopsys VCS高级编译选项优化技巧(2023最新版)

本文深入探讨了Synopsys VCS 2023版本中的高级编译选项优化技巧,帮助工程师提升仿真效率。通过并行编译、智能代码分析、精准覆盖率采样等策略,结合真实案例展示如何显著缩短仿真周期并优化资源使用,适用于数字芯片验证和大型SoC设计。

weixin_30338481的博客 116

SAP PI实战:5分钟搞定REST适配器同步接口配置(含Postman测试技巧)

本文详细介绍了如何在SAP PI中快速配置REST适配器同步接口,包括ESR设计、集成流配置及Postman测试技巧。通过实战步骤和关键参数设置,帮助开发者高效实现系统集成,特别适合需要实时数据交互的业务场景。

weixin_33738555的博客 486

【重启后nvidia-smi 命令出现错误】

NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running.

qq_44769377的博客 5217

数字电路逻辑与设计实验一 门电路逻辑功能及测试

(1)选二输入四异或门电路 74LS86,按图 1-8 接线,输入端 1、2、4、5 接逻辑开 关(S1~S4),输出端 A、B、Y 接电平显示发光二极管.用六反相器(非门)按图 1-11 接线,输入 80KHz 连续脉冲,用双踪示波器测输入, 输出相位差,计算每个门的平均传输延迟时间的 tpd 值。测试不同的输入组合:对门电路进行全面的测试,尝试不同的输入组合,包括各种可能的逻辑状态。检查门电路的输入:确认门电路的输入是否正确,并且输入信号的电平符合门电路的规格要求。确保输入信号的稳定性和准确性。

欢迎交流学习心得 2万+

使用FPGA实现MIPI DSI接口

通过使用FPGA,我们可以实现MIPI DSI接口,并在FPGA上生成相应的时序和电平转换电路。通过使用FPGA,我们可以实现MIPI DSI接口,并在FPGA上生成相应的时序和电平转换电路。在本文中,我们将探讨如何使用FPGA实现MIPI DSI接口,并提供相应的源代码。根据不同的发送状态,我们设置相应的输出信号。请注意,这只是一个基本的示例,用于说明如何使用FPGA实现MIPI DSI接口的发送功能。请注意,这只是一个基本的示例,用于说明如何使用FPGA实现MIPI DSI接口的发送功能。

ZdqDeveloper的博客 1712

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

上一篇: 第1.2章:StarRocks部署--部署环境准备
下一篇: 第1.4章:FE开发环境搭建(拓展篇)
wrr-cat
博客等级 码龄9年 128粉丝 302原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值