kafka核心概念

kafka应用场景

kafka环境搭建

与SpringBoot整合实战

  • pom maven依赖
  • application.properties
  • 创建KafkaTemplate对象
  • @KafkaListener监听消息

Kafka高吞吐量核心实战

  • 日志收集设计
  • 日志输出(日志组件输出log4j2)
  • 日志收集(FileBeat)
  • 日志过滤(logstash)
  • 日志持久化(elasticsearch)
  • 日志可视化(kibana)

分布式日志收集、链路追踪、监控告警平台架构讲解

  • 海量日志收集架构设计

分布式消息队列kafka学习 - 图1

image-20200504180604331

分布式消息队列kafka学习 - 图3

  • log4j2日志输出实战 分布式消息队列kafka学习 - 图4

  • filebeat日志收集 分布式消息队列kafka学习 - 图5

  • logstash日志过滤 分布式消息队列kafka学习 - 图6

  • elasticsearch日志持久化

  • kibana可视化

  • Watcher监控告警