ELK 7.17.9 集群部署实施记录
ELK 7.17.9 集群部署实施记录 运维落地档案 归档时间2026-09-23 集群架构Elasticsearch 7.17.9 Kibana 7.17.93 主 3 从 数据采集Metricbeat 7.17.96 节点全量主机监控 安全配置账号密码认证xpack.security 节点间 SSL 加密 一、集群节点清单最终状态 节点 IP 角色 部署组件 -------------------------------------------------------------------- es-master-1 10.10.10.25 候选主节点 Elasticsearch es-master-2 10.10.10.26 候选主节点 Elasticsearch es-master-3 10.10.10.27 候选主节点 Elasticsearch es-data-1 10.10.10.28 数据节点 Elasticsearch es-stack-1 10.10.10.29 数据节点 Kibana Elasticsearch Kibana es-data-2 10.10.10.30 数据节点后扩容 Elasticsearch 部署目录/usr/local/elk Kibana 访问http://10.10.10.29:5601 全部 6 节点均安装 Metricbeat 7.17.9es-stack-1 额外上报 Kibana 自身状态。 二、部署时间线 阶段 时间 说明 -------------------------------------------------------------------- 3 主 2 从方案制定 2026-01-10 生成《3主2从部署指导书》及配置文件备份 集群安全密码生成 2026-01-10 elasticsearch-setup-passwords auto Elasticsearch/Kibana 落地 2026-01-10 5 节点3 主 2 从集群上线 扩容为 3 主 3 从 2026-09-22 新增 es-data-210.10.10.30数据节点 Metricbeat 主机监控接入 2026-09-22 6 节点安装 Metricbeat 7.17.9 Kibana 看板修复 2026-09-22 解决看板空白问题见第七节 归档本记录 2026-09-23 说明方案同时存在 3 主 2 从与 3 主 3 从两版指导书最终以扩容后的 3 主 3 从为生产落地架构。 三、关键配置决策 1. 集群名称elk-cluster全节点一致 2. 主节点node.mastertrue, node.datafalse3 个保障元数据高可用 3. 数据节点node.masterfalse, node.datatrue3 个含 Kibana 所在节点 4. 防脑裂discovery.zen.minimum_master_nodes: 2 5. 节点发现discovery.seed_hosts 列举全部节点主机名 6. 安全xpack.security.enabledtrue节点间传输层 SSLelastic-certificates.p12 7. 浏览器访问走 HTTPxpack.security.http.ssl.enabledfalse 8. 中文界面Kibana i18n.localezh-CN 9. 证书同步es-master-1 生成后 scp 到全部节点chown elk:elk chmod 600 四、密码与账号管理 通过 ./elasticsearch-setup-passwords auto 生成内置用户密码核心账号 - elastic超级管理员集群管理、Kibana 登录 - kibana_systemKibana 连接 ES 专用 生成的 7 个内置用户密码已备份于《ELK7.17部署指南\密码备份.txt》 本文档不保存明文运维请以该源文件为准。 五、系统级优化ES 运行前置 1. hosts 映射6 节点 IP↔主机名 2. 关闭防火墙与 SELinux 3. 内核参数vm.max_map_count262144、fs.file-max655350 4. 资源限制nofile 65535、nproc 4096、memlock unlimited 5. swapoff -a并注释 /etc/fstab 中 swap 项提升稳定性 6. 专用 elk 用户禁止 root 启动 ES 六、Metricbeat 主机监控落地 目标让 6 个集群节点的主机与 ES 服务指标进入集群Kibana 可视化。 组件metricbeat-7.17.9-x86_64.rpm版本与 ES 严格一致 模块启用 - system 模块采集 CPU/内存/磁盘/网络/进程看机器 - elasticsearch 模块采集 JVM/分片/索引/节点状态看ES 服务 - elasticsearch-xpack 模块采集 .monitoring-*供 Stack Monitoring 全景 数据落点 - metricbeat-* 索引供 Dashboard 官方看板 - .monitoring-* 索引供 Stack Monitoring 启动方式systemctl enable --now metricbeat开机自启 七、问题与处置记录 问题 1Kibana Dashboard 看板空白什么都没有 现象打开 [Metrics System] 等看板图表区域空白无曲线。 根因这些是 Elastic Agent 新版集成自带看板默认查 metrics-*/logs-* 索引本项目用 Metricbeat 老式采集数据实际写入 metricbeat-* 索引与数据视图对不上且缺少 metricbeat-* 数据视图与官方看板。 处置 1. 用 elastic 超管账号导入官方看板资产remote_monitoring_user 权限不足会 403 metricbeat setup --dashboards \ -E output.elasticsearch.usernameelastic \ -E output.elasticsearch.passwordelastic密码 \ -E setup.kibana.hosthttp://10.10.10.29:5601 2. Dashboard 搜索 Metricbeat System / Metricbeat Elasticsearch 时间范围拉到 Last 7 days。 结果数据视图出现 metricbeat-*看板正常出图。实测近 30 分钟 system 数据 6 节点约 2 万条、elasticsearch 数据约 2730 条。 经验 1. 看板空白先核对索引 vs 数据视图是否匹配 2. Metricbeat 官方看板须用 elastic 超管导入 3. 数据是否写入先用命令行查索引最可靠 curl -u elastic:密码 http://localhost:9200/metricbeat-*/_search?qevent.module:systemsize1 八、当前运行状态 集群健康green副本已分配无主分片丢失 节点状态6 节点全部在线 监控采集metricbeat 各节点 active(running)开机自启 enabled 数据量metricbeat system 数据 6 节点 1 台管理机约 2 万条/30 分钟 后续建议 - 定期备份elasticsearch-dump / 快照 - 堆内存设为物理内存 50%≤32GB - 避免主节点跑复杂查询与批量写入 记录结束

相关新闻

C++代码实现MATLAB中的lqry函数功能

C++代码实现MATLAB中的lqry函数功能

// lqry.cpp // 独立编译命令&#xff08;不依赖任何第三方库&#xff09;&#xff1a; // g -stdc17 -O2 lqry.cpp -o lqry // ./lqry #include <iostream> #include <vector> #include <cmath> #include <complex> #include <iomanip> #in…

2026/10/2 5:36:51 阅读更多 →
开心麻花影视作品分析系统:Python数据采集与可视化实战

开心麻花影视作品分析系统:Python数据采集与可视化实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/1 2:46:05 阅读更多 →
移动端 input file 失灵原因排查与兼容性解决方案

移动端 input file 失灵原因排查与兼容性解决方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/1 2:46:05 阅读更多 →

最新新闻

灯塔工厂四层解耦架构:OT/IT时序一致性设计

灯塔工厂四层解耦架构:OT/IT时序一致性设计

简介&#xff1a;本资源是一份面向制造业数字化转型从业者、智能制造规划师及企业技术决策者的灯塔工厂架构设计专业课件&#xff0c;系统梳理灯塔工厂的核心内涵、顶层设计逻辑与技术落地路径。课件紧扣世界经济论坛&#xff08;WEF&#xff09;认证标准&#xff0c;深入解析“…

2026/10/2 5:36:53 阅读更多 →
RGB归一化全解析:从数值稳定到高效工程实现

RGB归一化全解析:从数值稳定到高效工程实现

做图像处理和视觉算法的&#xff0c;几乎没有人能绕开RGB归一化这件事。我第一次认真琢磨它&#xff0c;不是因为读论文受启发&#xff0c;而是因为训练时loss从第一个epoch开始就一路NaN&#xff0c;排查到凌晨才发现输入张量还停在0到255的整数区间&#xff0c;几层卷积一叠加…

2026/10/2 5:36:53 阅读更多 →
告别苦劳陷阱:用验收标准和结果导向提升职场效率

告别苦劳陷阱:用验收标准和结果导向提升职场效率

时间管理、个人成长、职场效率这些话题我聊过不少&#xff0c;但真正让我想坐下来写点东西的契机&#xff0c;是上个月的一次复盘。我有个朋友&#xff0c;连续加班四十天&#xff0c;每天在群里发自己凌晨下班打卡的照片&#xff0c;配一句“今天又是充实的一天”。结果季度考…

2026/10/2 5:36:53 阅读更多 →
智能工厂系统解决方案拆解:架构设计、数据采集与落地避坑

智能工厂系统解决方案拆解:架构设计、数据采集与落地避坑

简介&#xff1a;面向智能制造升级场景的109页PPT方案&#xff0c;系统阐述某著名企业智能工厂整体架构与落地路径&#xff0c;适合制造业信息化规划、工业互联网平台选型及智能产线改造项目参考。方案融合云计算、大数据、物联网与AI&#xff0c;覆盖营销云、采购云、制造云、…

2026/10/2 5:36:53 阅读更多 →
MES基础业务考核试题设计:从考点地图到docx文档落地

MES基础业务考核试题设计:从考点地图到docx文档落地

简介&#xff1a;这是面向制造业从业者、MES系统实施人员及企业信息化初学者的基础业务考核资料&#xff0c;以2016年实习生MES基础业务考核试题为载体&#xff0c;覆盖MES核心概念、ISA-95标准、物料与BOM管理、QMS质量系统、JIT生产方式、KPI指标、离散/流程制造区别及数字化…

2026/10/2 5:36:53 阅读更多 →
DO-326A航空网络安全合规实战指南:从威胁建模到最小可行证据包

DO-326A航空网络安全合规实战指南:从威胁建模到最小可行证据包

简介&#xff1a;本资源为RTCA发布的航空适航安全领域权威指导文件DO-326A&#xff08;2014年修订版&#xff09;&#xff0c;面向民用航空器设计单位、适航审定工程师、机载系统安全评估人员及高校航空安全方向研究者&#xff0c;用于应对日益突出的恶意电子干扰对飞行安全构成…

2026/10/2 5:35:53 阅读更多 →

日新闻

从零搭建AI工程化:模型之外的完整闭环

从零搭建AI工程化:模型之外的完整闭环

先搞清楚一件事&#xff1a;从零开始做 AI 工程化&#xff0c;难的从来不是调模型、写提示词&#xff0c;而是把一套原型 Demo 变成长得像是“正经系统”的东西。你手里可能已经有了能跑通的代码&#xff0c;也可能刚读完一些概念&#xff0c;但真到了要把它变成可维护、可观测…

2026/10/2 0:00:20 阅读更多 →
大模型训练显存估计与混合精度训练实战指南

大模型训练显存估计与混合精度训练实战指南

1. 大模型训练显存估计与混合精度训练详解显存不够用&#xff0c;几乎是每个做大模型训练的人都会撞上的第一堵墙。你可能也经历过&#xff1a;模型代码写完了&#xff0c;数据管道跑通了&#xff0c;满心欢喜地按下训练启动脚本&#xff0c;结果几秒钟后终端弹出一行红字——C…

2026/10/2 0:00:20 阅读更多 →
小样本学习数据集选型指南:27个真正可用的高质量数据集

小样本学习数据集选型指南:27个真正可用的高质量数据集

1. 小样本学习的“弹药库”&#xff1a;为什么你总在找数据集&#xff0c;却总找不到真正能用的&#xff1f; 小样本、数据集——这两个词最近半年在我处理的200多个AI项目咨询里&#xff0c;出现频率排进前三。不是模型调不好&#xff0c;不是代码写不对&#xff0c;而是卡在…

2026/10/2 0:00:20 阅读更多 →

周新闻

如何划分训练/验证集:Spirula Studio五种eval_mode策略详解

如何划分训练/验证集:Spirula Studio五种eval_mode策略详解

如何划分训练/验证集&#xff1a;Spirula Studio五种eval_mode策略详解 【免费下载链接】spirula-studio Cross-vendor 3D Gaussian Splatting trainer - video to splat to mesh, Vulkan or CUDA. 项目地址: https://gitcode.com/GitHub_Trending/sp/spirula-studio Sp…

2026/10/1 19:40:48 阅读更多 →
SEO怎么推广速查手册新手避坑实战指南

SEO怎么推广速查手册新手避坑实战指南

SEO怎么推广速查手册新手避坑实战指南 模板网站太丑不够用?别急着加滤镜,那是治标不治本。很多老板盯着后台流量掉得眼红,却还在纠结首页Banner的圆角是不是3像素。这就像穿着西装去挖土,姿势不对,努力白费。我整理这份 速查手册…

2026/10/1 19:41:40 阅读更多 →
FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏

FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏

FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏 【免费下载链接】FireRed-OpenStoryline FireRed-OpenStoryline is an AI video editing agent that transforms manual editing into intention-driven directing through natural language …

2026/10/1 20:05:24 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/1 0:00:30 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/2 5:26:06 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/1 1:01:17 阅读更多 →