Elasticsearch技术体系
2025-04-10 11:27:38 0 举报AI智能生成
Elasticsearch技术体系
作者其他创作
大纲/内容
多数据源接入
集群部署
数据规模评估
节点角色划分
master
data
coordinate
ingest
机器资源配置选型
cpu
memory
disk
ssd
机械磁盘
优化配置
线程池调优
队列调优
jvm调优
缓存调优
拓展
名人墙（博客）
数据建模
数据清洗
logstash filter
ingest pipeline
思考：是否占用es集群资源
global template
settings
single shard size
shard
replica
refresh interval
alias
mappings
basic types
complex types
nested
join
code & hot
hot
warm
cold
亿级数据按时间切分索引
rollover滚动索引 + curator定时管理
ILM
分词 & 词典
领域词典拓展
动态更新词典
性能监控
监控指标
集群健康
红黄绿
分片数
unassigned shard
节点数
检索时延和速率
写入速度额时延
内存使用率
jvm堆内存
磁盘使用率
cpu使用率
线程池
队列大小
负载
监控工具
kibana stack monitor
cerebro
head插件
集群安全
xpack基础功能（6.8+免费）
权限
空间space
角色role
用户user
加密
ssl通信
http -> https
快照和恢复
集群快照
索引快照
数据迁移
reindex
elastic-dump
Elastic Stack
logstash
input
filter
output
beats
kibana
解决方案
分支主题
应用场景
特性
不支持事务
多表关联有限
nested，join但性能很差
不支持准实时
高阶功能收费
机器学习
kerberos安全认证
审计
使用场景
搜索服务
高性能：高并发、低延迟
强相关：自定义打分、排序等
高可用：机房、机架感知、异地容灾
日志实时分析
典型场景
业务日志：用户行为
状态日志：慢查询、异常检测
系统日志
特性
elastic stack完整解决方案
实时性：日志产生->可访问到秒级
全文检索：基于倒排，支持灵活搜索
交互式分析：万亿级日志，搜索秒级响应
商业智能BI
收藏
0 条评论
下一页
