news 2026/4/16 15:43:08

Apache Doris的部署

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Apache Doris的部署

Apache Doris 部署有单机快速部署和生产环境的集群部署两种常见方式,单机部署适合测试与开发,集群部署适用于正式业务场景。以下是基于主流 2.x 版本的详细部署步骤,以 Linux 系统为例:

前期准备

  1. 环境依赖安装
    组件要求及安装命令
    JDKFE 依赖 JDK 8,下载后配置环境变量。示例配置:export JAVA_HOME=/root/jdk1.8.0_431export PATH=$PATH:$JAVA_HOME/bin
    系统依赖库BE 需依赖相关库,CentOS 执行:yum install -y libstdc++-devel zlib-devel snappy-devel lz4-devel;Ubuntu 执行:apt-get install -y libstdc++6 zlib1g-dev libsnappy-dev liblz4-dev
    辅助工具安装 mysql - client 用于连接 FE,ntp 用于时间同步:yum install -y mysql - client ntp(CentOS)或apt install -y mysql - client-core - 8.0 ntp(Ubuntu)
  2. 系统参数优化执行以下命令调整系统配置,避免部署后出现运行异常:

    bash

    运行

    # 调整虚拟内存映射数 sysctl -w vm.max_map_count=2000000 # 关闭swap分区 swapoff -a # 提高文件描述符限制 ulimit -n 655350 # 写入配置文件确保重启生效 echo "* soft nofile 65535" >> /etc/security/limits.conf echo "* hard nofile 65535" >> /etc/security/limits.conf
  3. 下载安装包从Doris 镜像站下载稳定版安装包,示例命令:

    bash

    运行

    wget https://apache-doris-releases.oss-accelerate.aliyuncs.com/apache-doris-2.1.10-bin-x64.tar.gz # 解压到指定目录 mkdir -p /opt/doris tar -zxvf apache-doris-2.1.10-bin-x64.tar.gz -C /opt/doris cd /opt/doris

单机部署(测试环境)

单机部署会在同一台机器上同时启动 FE 和 BE,步骤简单适合快速测试。

  1. 部署 FE(前端节点)
    1. 编辑 FE 配置文件conf/fe.conf,关键配置如下:

    bash

    运行

    # 指定本机内网IP priority_networks = 192.168.0.118/24 # 配置JDK路径 JAVA_HOME=/root/jdk1.8.0_431 # JVM内存配置,根据机器内存调整 JAVA_OPTS="-Xms2g -Xmx2g -XX:+UseG1GC"
    1. 启动 FE 并验证:

    bash

    运行

    # 后台启动FE bin/start_fe.sh --daemon # 查看进程,存在DorisFE则启动成功 jps
  2. 部署 BE(后端节点)
    1. 编辑 BE 配置文件conf/be.conf,配置内网 IP:

    bash

    运行

    priority_networks = 192.168.0.118/24
    1. 启动 BE 并验证:

    bash

    运行

    # 后台启动BE bin/start_be.sh --daemon # 查看进程,存在DorisBE则启动成功 jps
  3. 注册 BE 到 FE通过 MySQL 客户端连接 FE,完成 BE 节点注册:

    bash

    运行

    # 连接FE,默认无密码 mysql -uroot -P9030 -h127.0.0.1 --default-auth=mysql_native_password # 执行注册命令,IP为本机地址 alter system add backend "192.168.0.118:9050"; # 查看BE状态,Alive为true表示注册成功 show proc '/backends'\G

集群部署(生产环境)

生产环境建议 FE 节点≥3 台(1 主 2 从)、BE 节点≥3 台,保障高可用,以下是核心步骤。

  1. 节点规划示例
    节点 IP角色说明
    192.168.1.10FE(Leader)主前端节点,管理元数据
    192.168.1.11FE(Follower)从前端节点,实现高可用
    192.168.1.12BE数据存储与计算节点
    192.168.1.13BE数据存储与计算节点
    192.168.1.14BE数据存储与计算节点
  2. 批量部署 FE
    1. 先在 192.168.1.10 启动主 FE,步骤同单机部署的 FE 部署。
    2. 在 192.168.1.11 等从 FE 节点,修改fe.conf后,执行命令加入集群:

    bash

    运行

    # 从FE节点启动并关联主FE bin/start_fe.sh --daemon --helper 192.168.1.10:9010
  3. 批量部署 BE
    1. 每台 BE 节点修改conf/be.conf中的priority_networks为对应本机 IP。
    2. 启动所有 BE 后,通过 MySQL 客户端连接主 FE,批量注册 BE:

    bash

    运行

    alter system add backend "192.168.1.12:9050","192.168.1.13:9050","192.168.1.14:9050";

验证部署

  1. 访问 FE 的 Web 界面,默认端口 8030,如http://192.168.1.10:8030,可查看集群节点状态。
  2. 通过 MySQL 客户端执行简单查询,验证功能正常:

    sql

    create database test_db; use test_db; create table test_table(id int) distributed by hash(id) buckets 1; insert into test_table values(1); select * from test_table;
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/16 12:13:13

阿里Wan2.2视频生成完整指南:如何在消费级显卡上实现电影级创作

想要用普通显卡就能生成专业级视频吗?阿里云通义万相团队开源的Wan2.2视频生成模型正是你需要的终极解决方案!这款业界首个采用MoE(混合专家)架构的扩散模型,让720P高清视频生成在RTX 4090等消费级显卡上成为现实&…

作者头像 李华
网站建设 2026/4/16 12:59:10

VideoSrt:AI智能字幕生成工具全攻略

VideoSrt:AI智能字幕生成工具全攻略 【免费下载链接】video-srt-windows 这是一个可以识别视频语音自动生成字幕SRT文件的开源 Windows-GUI 软件工具。 项目地址: https://gitcode.com/gh_mirrors/vi/video-srt-windows 还在为视频字幕制作而烦恼吗&#xff…

作者头像 李华
网站建设 2026/4/16 0:38:28

SpringBoot3高效缓存:布隆过滤器实战

前言在当今互联网软件开发的高并发、海量数据场景下,如何高效处理数据、提升系统性能成为了开发者们持续关注的焦点。缓存作为提升系统性能的重要手段,在常规机制中却面临着缓存穿透的难题。当大量无效请求(请求的 key 既不存在于缓存&#x…

作者头像 李华
网站建设 2026/4/15 16:50:16

incbin:革命性的C/C++二进制文件嵌入解决方案

incbin:革命性的C/C二进制文件嵌入解决方案 【免费下载链接】incbin Include binary files in C/C 项目地址: https://gitcode.com/gh_mirrors/in/incbin 在现代C/C开发中,二进制文件嵌入已成为提升应用独立性和部署效率的关键技术。无论是嵌入式…

作者头像 李华
网站建设 2026/4/15 20:34:57

ArcGIS开发实战宝典:227个案例解锁地理信息系统开发新境界

ArcGIS开发实战宝典:227个案例解锁地理信息系统开发新境界 【免费下载链接】arcobjects-sdk-community-samples This repo contains the source code samples (.Net c#, .Net vb, and C) that demonstrate the usage of the ArcObject SDK. 项目地址: https://gi…

作者头像 李华
网站建设 2026/4/16 12:25:26

DeepMind Acme框架:构建下一代强化学习系统的架构革命

DeepMind Acme框架:构建下一代强化学习系统的架构革命 【免费下载链接】acme A library of reinforcement learning components and agents 项目地址: https://gitcode.com/gh_mirrors/acm/acme Acme框架通过其独特的模块化设计和分布式架构,正在…

作者头像 李华