Kafka

Kafka

k8s部署kafka集群

k8s部署kafka集群

之前文章有用过statefulset部署kafka集群,但是如果集群外部想消费的话,是无法消费的,因为不通无法解析kafka地址,想到通过nodeport来暴露每个pod,zookeeper也需要,做起来挺麻烦,本篇是在helm安装后来写的,仅个人学习测试记录,生产环境上kafka集群建议还是放在集

2020-08-06
300 0
centos7搭建kafka集群

centos7搭建kafka集群

环境准备系统IP主机名centos7.6192.168.51.195kafka01centos7.6192.168.51.196kafka02centos7.6192.168.51.197kafka03配置hosts[root@kafka01~]#cat/etc/hosts192.168.51.19

2020-08-06
250 0
kafka概要整理

kafka概要整理

初识Kafka什么是 KafkaKafka 是由 Linkedin 公司开发的,它是一个分布式的,支持多分区、多副本,基于 Zookeeper 的分布式消息流平台,它同时也是一款开源的基于发布订阅模式的消息引擎系统Kafka 的基本术语消息:Kafka 中的数据单元被称为消息,也被称为记录,可以把它

2020-08-06
288 0
k8s部署elk+kafka+filebeat

k8s部署elk+kafka+filebeat

环境配置服务用途版本elasticsearch存储+搜索7.3filebeat日志收集7.3logstash过滤筛选7.3kibana图形化展示7.3kafka消息中间件2.4elkkafkafilebeat架构图:filebeat部署在日志服务器部署filebeat7.x#配置yum源[root@

2020-07-31
201 0
k8s部署 Kafka Zookeeper KafkaManager

k8s部署 Kafka Zookeeper KafkaManager

系统环境Kubernetes版本:1.14.0kafka版本:2.4.0zookeeper版本:3.5.6kafkamanager版本:2.0.0.2组件简介Kafka简介Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。它是一个分布式、支持分区的的、多副本,