k8s构建ELK日志平台是一个重要的技术主题，它在现代软件开发中扮演着关键角色。
本文系统介绍了k8s构建ELK日志平台的核心概念和实践经验，帮助你深入理解这一技术领域。
Pod中附加专用日志收集的容器
一、概述
目前主流日志收集系统为：Filebeat + ELK，本文尝试使用该系统对k8s里部署的Pod进行日志收集并加以图形可视化展示；
日志收集方案设计图
2021/4/13大约 5 分钟
- MySQL24
- 并发编程23
- 大数据23
- 数据库23
- JVM20
- 担保20
- Redis20
- 大模型19
- SpringCloud19
- Java18
- java基础14
- 分布式14
- 面试13
- 风控13
- 项目管理12
- Kubernetes12
- 微服务11
- 线上问题排查11
- 锁10
- 金融10
- 高可用10
- 运维10
- LeetCode9
- 算法9
- Hive9
- 数据结构8
- HADOOP8
- RAG8
- Spring8
- Kafka7
- 性能优化7
- 云原生7
- K8s7
- 安全6
- 架构设计6
- 数字化转型6
- 重构5
- 前端5
- 消息队列5
- 设计模式5
- RocketMQ5
- 分布式事务5
- 源码5
- 负载均衡5
- 部署5
- 排查5
- 线上排障5
- GC5
- 产品经理4
- 职场4
- 团队协作4
- 沟通4
- Arthas4
- 线上排查4
- 密码学4
- 网络安全4
- HTTP4
- 线程池4
- Netty4
- 高性能4
- 虚拟线程4
- 限流4
- Agent4
- 再担保4
- 架构4
- 索引4
- Spring Boot4
- 分布式锁4
- Feign4
- 源码解析4
- 优化4
- Docker4
- 调优4
- 滑动窗口3
- 刷题3
- AI3
- DevOps3
- 团队管理3
- 团队效率3
- SpringBoot3
- 异步编程3
- G13
- ZGC3
- 内存模型3
- MapReduce3
- 可信计算3
- java3
- NIO3
- LangChain3
- 微调3
- SFT3
- AI Agent3
- 业务流程3
- 保后管理3
- 电子签章3
- PostgreSQL3
- 分库分表3
- 数据一致性3
- TCC3
- Saga3
- 高并发3
- 测试3
- 可观测性3
- JavaAgent3
- Sentinel3
- 事务3
- TCP3
- 网络3
- 网络协议3
- HDFS3
- 索引优化3
- 慢查询3
- Nacos3
- Ribbon3
- CICD3
- 容器化3
- 二分查找2
- 双指针2
- 排序2
- 职业规划2
- 产品方案2
- 产品思维2
- 服务器2
- 资源管理2
- 产品管理2
- 技术债2
- 代码质量2
- 方法论2
- 系统设计2
- 性能分析2
- CompletableFuture2
- 并发2
- 垃圾回收2
- 性能调优2
- AQS2
- Linux2
- 内存优化2
- 线程2
- 网络编程2
- JDK212
- WAF2
- 签名2
- 令牌2
- SQL注入2
- TLS2
- 向量检索2
- RLHF2
- 对齐2
- vLLM2
- 推理优化2
- 大模型部署2
- 向量数据库2
- Milvus2
- 实践2
- 数据质量2
- 量化2
- 提示词2
- 人工智能2
- 宏观经济2
- 货币政策2
- 金融常识2
- 财务分析2
- 尽调2
- CFCA2
- 北京CA2
- 接口对接2
- 国密2
- PKI2
- 案例2
- ROI2
- SQL Server2
- ORM2
- ShardingSphere2
- Iceberg2
- 数据治理2
- DDD2
- Raft2
- 雪花算法2
- WebSocket2
- SSE2
- 消息推送2
- QPS2
- 对账2
- RabbitMQ2
- Istio2
- 容器编排2
- SLA2
- Jaeger2
- OpenTelemetry2
- 监控2
- 鸡汤2
- Go2
- Disruptor2
- 反射2
- DI2
- 数据类型2
- JDK2
- ThreadLocal2
- 字节码操作2
- CDN2
- Seata2
- 分布式缓存2
- 一致性哈希2
- Nginx2
- ISR2
- 事务消息2
- 顺序消息2
- HTTPS2
- TCP/IP2
- 网络模型2
- ElasticSearch2
- 搜索引擎2
- 数据操作2
- SQL优化2
- 死锁2
- 主从复制2
- 大Key2
- 持久化2
- 自动配置2
- SPI2
- 异常处理2
- Hystrix2
- 配置2
- HTTP客户端2
- 健康检查2
- 配置中心2
- async-profiler2
- OOM2
- 内存泄漏2
- MAT2
- jstack2
- 类加载2
- 链表1
- 字符串1
- 数组1
- 二叉树1
- 遍历1
- 动态规划1
- DP1
- 回溯1
- DFS1
- BFS1
- 数据驱动1
- A/B测试1
- 埋点1
- 产品决策1
- OKR1
- 目标管理1
- 技术团队1
- 数据分析1
- PV1
- UV1
- 互联网1
- 需求评审1
- PMF1
- 技术决策1
- 工具选型1
- 工时估算1
- 人天计算1
- 风控系统1
- 号码画像1
- 异常检测1
- 代码审查1
- 开发流程1
- 私有化部署1
- 企业IT1
- 会计系统1
- 财务产品1
- B端产品1
- 需求分析1
- 平台运营1
- 内容策略1
- SEO1
- 渲染策略1
- 设计法则1
- 交互设计1
- 用户体验1
- UI设计1
- 向上管理1
- 需求调研1
- 国企信息化1
- 定价策略1
- AI商业1
- 广告系统1
- 反作弊1
- 广告平台对接1
- 增长1
- 技术写作1
- 文档1
- 1on11
- 职业发展1
- 技术方案1
- 评审清单1
- 技术评审1
- 方案设计1
- 技术选型1
- 技术领导力1
- 架构评审1
- 敏捷开发1
- Scrum1
- Kanban1
- 数电发票1
- 税务产品1
- 企业服务1
- 数字化1
- 版本管理1
- 迭代1
- 人际关系1
- 架构演进1
- 跨团队协作1
- 远程协作1
- 分布式团队1
- 异步沟通1
- 需求变更1
- 产品协作1
- 非暴力沟通1
- 复盘1
- 持续改进1
- 诊断1
- Git1
- 版本控制1
- Hash1
- 哈希表1
- Lock1
- 并发包1
- IO模型1
- epoll1
- Java NIO1
- Reactor1
- Spark1
- Tomcat1
- 服务器配置1
- Yarn1
- maven1
- 构建工具1
- 伪共享1
- 加密解密1
- 可靠性1
- 容错技术1
- 公钥私钥1
- 加密1
- 对象模型1
- 数字签名1
- 文件上传1
- Content-Type1
- 池化技术1
- 特征提取1
- 用户行为分析1
- IO1
- 阻塞与非阻塞1
- Project Loom1
- 责任链模式1
- 运算符1
- 重放攻击1
- 黑白名单1
- JWT1
- OAuth 2.01
- OIDC1
- 认证协议的工业实践1
- Spring Security1
- Authentication1
- XSS1
- CSRF1
- Web安全1
- OWASP1
- 安全编码1
- 对称加密1
- 非对称加密1
- 数据脱敏与加密1
- 金融系统1
- LangGraph1
- AutoGen1
- Memory1
- 记忆系统1
- ClaudeCode1
- Embedding1
- BGE1
- LLaMA-Factory1
- LoRA1
- AI框架1
- 文档加载1
- 检索增强1
- Transformer1
- AI Gateway1
- 多模型路由1
- 成本控制1
- DPO1
- PPO1
- 强化学习1
- Function Calling1
- Tool Use1
- GraphRAG1
- 知识图谱1
- 微软1
- 图增强检索1
- 实体抽取1
- MCP1
- Model Context Protocol1
- Anthropic1
- 工具调用1
- 协议设计1
- 技术架构1
- PGVector1
- 多模态1
- CLIP1
- LLaVA1
- 视觉语言1
- Prompt注入1
- 越狱1
- Jailbreak1
- Red Teaming1
- 防护策略1
- 数据工程1
- 数据清洗1
- Alpaca1
- 模型微调1
- KV Cache1
- 评估1
- Benchmark1
- LLM-as-Judge1
- JSON输出1
- 提示词工程1
- Prompt优化1
- 工程实践1
- 效果评估1
- ReAct1
- INT81
- INT41
- GPTQ1
- AWQ1
- 通货膨胀1
- 通货紧缩1
- 经济周期1
- 发票1
- 增值税1
- 货币流通1
- 货币创造1
- 商业银行1
- 关键指标1
- 数据来源1
- 贷款额度1
- 授信模型1
- 财务反作假1
- 额度测算1
- 信用惩戒1
- 行政处罚1
- 失信被执行1
- 重大诉讼1
- 大额被执行1
- 等级划分1
- 数据源1
- 再担保函1
- 国家融担基金1
- 产品设计1
- 系统对接1
- 风险管理1
- 风险控制1
- 贷款1
- 投资1
- 风控模型1
- 合同审核1
- 法审1
- 总对总1
- 外包拍照1
- 物联网1
- RPA1
- 法人签章1
- 本地部署1
- 云部署1
- 委托保证合同1
- 代偿1
- 资产处置1
- 追偿1
- 企业经营1
- 保前尽调1
- 合同管理1
- 业务融合1
- 流程重构1
- 系统集成1
- 银担协同1
- 组织变革1
- 股票风险1
- 股权质押1
- 反担保1
- 历史1
- 融资1
- 批量担保1
- 非融资担保1
- 保函1
- 工程担保1
- ClickHouse1
- OLAP1
- 实时分析1
- MinIO1
- 分布式存储1
- 对象存储1
- TiDB1
- CockroachDB1
- NewSQL1
- 分布式数据库1
- Oracle1
- 跨数据库查询1
- MyBatis-Plus1
- 插件1
- 缓存1
- Flink1
- 实时数仓1
- 湖仓一体1
- 并发控制1
- 达梦数据库1
- 国产数据库1
- 主数据1
- 交易数据1
- 元数据1
- ODS1
- DWD1
- DWS1
- ADS1
- 数据湖1
- Hudi1
- CQRS1
- Event_Sourcing1
- 事件驱动架构1
- 领域驱动设计1
- 共识算法1
- 一致性1
- 中台架构1
- 技术中台1
- 事件驱动1
- EDA1
- 架构模式1
- 六边形架构1
- 整洁架构1
- ID生成器1
- Leaf1
- Tinyid1
- Zookeeper1
- 实时推送1
- 容量规划1
- 架构容量1
- 资源预估1
- 账务1
- 延迟队列1
- 服务拆分1
- 架构决策1
- ADR1
- 文档化1
- 架构管理1
- 演进式架构1
- 架构原则1
- 可持续发展1
- 短链1
- Base621
- 秒杀1
- 担保业务1
- 金融架构1
- API1
- RESTful1
- MyBatis1
- SQL1
- 自动装配1
- 原理1
- MQ1
- Dubbo1
- 架构选型1
- JUnit1
- Testcontainers1
- Unit Test1
- 团队策略1
- Bug1
- 创建型模式1
- 结构型模式1
- 行为型模式1
- Helm1
- 包管理1
- 服务网格1
- SLI1
- SLO1
- 错误预算1
- 服务质量1
- SRE1
- Prometheus1
- Grafana1
- P991
- 性能指标1
- 延迟1
- 信创1
- 国产化1
- 国企运维1
- 自主可控1
- 等保合规1
- 奢侈品1
- 生活方式1
- 品牌故事1
- 焦虑1
- 成长1
- 自我认知1
- 原子类1
- BigDecimal1
- ConcurrentHashMap1
- 同步工具1
- CountDownLatch1
- 多线程1
- 结构化并发1
- 新特性1
- 网络框架1
- String1
- IP地址1
- 子网掩码1
- JDK1.81
- Queue1
- Java基础1
- 文件操作1
- IO流1
- AOP1
- 全链路监控1
- JVM监控1
- DNS路由1
- 边缘计算1
- 缓存策略1
- Paxos1
- 分布式一致性1
- Service Mesh1
- 分布式ID1
- 号段模式1
- UUID1
- CAP1
- 分布式系统1
- AT模式1
- 唯一ID1
- 生成策略1
- 缓存设计1
- Redis Cluster1
- 缓存穿透防护1
- 分布式追踪1
- ZooKeeper1
- etcd1
- Spring AOP1
- Resilience4j1
- 令牌桶1
- 漏桶1
- MFSU1
- 构建优化1
- TypeScript1
- 编程语言1
- Vue 31
- Composition API1
- Pinia1
- React1
- 视频1
- 进程管理1
- fork1
- 信号1
- 操作系统1
- Producer1
- Consumer1
- Exactly-Once1
- 分区1
- exactly-once1
- 延迟消息1
- 幂等1
- 消息可靠性1
- 选型1
- Pulsar1
- GET1
- POST1
- 证书1
- 密钥交换1
- Java网络1
- HttpClient1
- 拥塞控制1
- 慢启动1
- 拥塞避免1
- UDP1
- 数据定义1
- 数据建模1
- HBASE1
- EXPLAIN1
- 查询调优1
- MVCC1
- ACID1
- 隔离级别1
- MyCat1
- Vitess1
- pt-query-digest1
- Online DDL1
- B+树1
- MHA1
- MGR1
- Orchestrator1
- 后端1
- undo log1
- 数据安全1
- 表设计1
- redo log1
- 热Key1
- Cluster1
- Redisson1
- 看门狗1
- 字典1
- 基本特性1
- 主从架构1
- Spring Boot 31
- Jakarta EE1
- GraalVM1
- 条件装配1
- Bean生命周期1
- SpringMVC1
- 打包1
- Gateway1
- 路由1
- 服务注册发现1
- 熔断降级1
- RestTemplate1
- 服务构建1
- 服务注册1
- 服务消费1
- Actuator1
- 镜像1
- GitOps1
- ArgoCD1
- CI/CD1
- Operator1
- CRD1
- 存储1
- CNI1
- Service1
- Ingress1
- QoS1
- HPA1
- VPA1
- ELK1
- 日志平台1
- DeepSeek1
- Keepalived1
- 缓存穿透1
- 回源风暴1
- 缓存预热1
- CPU飙升1
- JVM调优1
- Elasticsearch1
- 分片未分配1
- 写入拒绝1
- circuit breaker1
- Full GC1
- Pod重启1
- OOMKilled1
- NodeNotReady1
- PodEviction1
- kubelet1
- 执行计划1
- 延迟排查1
- 线程安全1
- SimpleDateFormat1
- 循环依赖1
- 启动失败1
- heap dump1
- 接口优化1
- APM1
- 性能排查1
- 慢SQL1
- HikariCP1
- 数据库连接池1
- 连接泄漏1
- 时间同步1
- 积压排查1
- 背压1
- 磁盘IO1
- iostat1
- 日志优化1
- 最终一致性1
- 日志1
- Logback1
- 磁盘满1
- 异步日志1
- 线程排查1
- DDoS1
- CC攻击1
- 应急响应1
- 火焰图1
- ThreadPoolExecutor1
- 队列堆积1
- 拒绝策略1
- 网络超时1
- 网络诊断1
- DNS1
- Region1
- 混合回收1
- 日志分析1
- GCEasy1
- Shenandoah1
- 低延迟1
- JMM1
- volatile1
- happens-before1
- 内存溢出1
- Metaspace1
- DirectMemory1
- 双亲委派1
- 热部署1
- 性能诊断1
- 生产环境1
- 运行时数据区1
- 同步1
- 读写锁1